JP2005333287A - 携帯ｔｖ電話システム - Google Patents

Abstract

【課題】 携帯端末によるＴＶ電話通信中のシステム負荷を軽減する。
【解決手段】 送信画像データと受信画像データの表示手段として大小２つの画面を有し、携帯端末に組み込まれている携帯ＴＶ電話システムにおいて、ＴＶ電話管理部１１に、大画面への表示データと小画面への表示データのユーザが選択可能な組合せパターンについて、小画面フレーム作成を実行する間隔を示す小画面更新頻度を付加した定義テーブルを保持する。ＴＶ電話管理部１１は、小画面表示を行う場合に、小画面更新頻度に基づいて、画像変換部４に対し、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引く。これによって、小画面フレーム作成の実行回数を削減する。
【選択図】 図１

Description

本発明は、携帯端末に組み込まれ大小２つの表示画面を有する携帯ＴＶ電話システムに関する。

一般に、携帯端末によるＴＶ電話通信中は、自ＴＶ電話システムから送信する画像データと、相手ＴＶ電話システムから受信する画像データとの２種類の画像データが存在し、その２種類の画像データのどちらか一方、または両方を同時に表示することが可能となっている。

図８は、携帯端末によるＴＶ電話通信における画像データの表示配置例を示す。大画面８１は領域の大きい画面であり、小画面８２は領域の小さい画面である。また、関連情報領域８３は、上記２種類の画像データ以外のデータを表示するための領域であって、携帯端末の電力の残量や電波の感度等を示す装置情報や、ユーザがＴＶ電話通信中に選択可能な機能の情報等を表示できる領域である。

図６はＴＶ電話システムにおける従来の大／小画面表示設定の定義例を表示する。図６では、大画面への表示データと小画面への表示データの組合せパターンごとに、ユーザが選択可能なパターンをシステム仕様の列にて「許可」と定義し、ユーザが選択不可能なパターンをシステム仕様の列にて「不許可」と定義している。図６において、送信画像または受信画像を大画面および小画面に同時に表示することと、送信画像または受信画像のみを小画面に表示することが不許可となっているが、これは不合理な表示であることから当然の措置である。

図７は、大／小画面表示設定可能なＴＶ電話システムにおける小画面表示の動作を説明するためのフローチャートである。ユーザが通話を開始し、送信フレーム画または受信フレーム画の作成完了が通知されると（図７のステップＤ１）、作成されたフレーム画が小画面８２に表示するべき画像データであるかを判定する（ステップＤ２）。この判定では、判定を実行する時点でのユーザの指定と、図６に示したパターンとを照らし合わせて結果を出す。

小画面表示を行わない場合はＴＶ電話終了判定（ステップＤ５）に移行する。一方、小画面表示設定を行う場合には、ステップＤ１で作成されたフレーム画を読み出し、小画面フレーム作成を実行する（ステップＤ３）。作成された小画面フレームのデータは小画面バッファ（図示省略）に格納され、その内容がＶＲＡＭバッファに反映される（ステップＤ４）。これにより、小画面８２に画像が表示される。以上の手順がＴＶ電話終了まで繰り返される（ステップＤ５）。

ところで、携帯端末によるＴＶ電話通信は、画像データのエンコード処理／デコード処理を連続的に実行するというシステム負荷の高い状態において、例えばメール受信のような、非同期に発生する他のイベントにも即座に対応する必要があるという観点から、通信中のシステム負荷の軽減が望まれている。

また、携帯端末は限られた電力量しか持たないにもかかわらず、通話時間や待ち受け時間などの運用時間の延長を求められているという観点から、携帯端末上で実行されるあらゆる機能において、よりいっそうの消費電力の削減も求められている。

このような要請に対して、従来、ＴＶ電話通信におけるシステム負荷軽減のために以下のような技術が提案されている。

第１の技術は、ＴＶ電話通信中に、受信信号の電界強度と受信信号の誤り率に対応して送信フレーム数の決定やデータ送信速度の決定を行い、運用時の消費電力を軽減する。また、送信フレーム数の決定やデータ送信速度の決定をユーザに任せる機能を付加することにより、ユーザの要求には対応することを可能とする（例えば、特許文献１参照）。

第２の技術は、ユーザの操作負担をなくしながら、ユーザの利用形態に適した省電力動作を実現できる画像処理装置及びその装置における動作制御方法を提供する。また、装置に電力を供給している電源の状態に応じて、装置における画像データを処理するフレームレートや解像度を制御して、装置の動作を制御することができる画像処理装置及びその装置における動作制御方法を提供する（例えば、特許文献２参照）。

第３の技術は、ＣＣＤカメラ等の動画像撮像手段による動画像の撮像におけるフレームレートの値及び動画像データ圧縮処理手段による動画像データの圧縮処理におけるフレームレートの値を、外部からの操作に応じて、又は携帯型情報端末装置に電力を供給するバッテリの残存容量に応じて調節するフレームレート調節手段を備えるというものである（例えば、特許文献３参照）。

また、１つの表示装置への大小画面の表示の実現における負荷軽減のために以下のような技術が提案されている。

第１の技術は、子画面用の情報を１フィールド間引いてメモリへ書き込むとともに、親画面情報に同期して、２フィールドにわたり同じ内容を読み出すようにすることによって、フィールド識別回路や追い越し禁止回路、インターレス制御回路を省くとともに、メモリ容量を小さくするというものである（例えば、特許文献４参照）。

第２の技術は、親画面と小画面とを映出する２画面表示テレビ受信機において、小画面のメモリ追い越しにより生じていた継ぎ目を防止する。また、フィールド周波数が異なる２つの映像信号の同期あわせのためのフィールド変換を適切に行うことにより、ある時間ごとに１フィールド分のデータを捨てたり、前フィールドのデータを再出力する必要をなくする（例えば、特許文献５参照）。

第３の技術は、子画面用映像信号処理系における間引き手段の前段に、映像信号の画像表示領域の大きさに対応した遅延量でデジタル映像信号を遅延させる遅延手段を介在させ、間引き処理によって垂直方向の折り返し成分を除去することにより、子画面の垂直方向の折り返し歪みを防止するというものである（例えば、特許文献６参照）。

特開２００１−１０３５６５（第４頁、第７頁、図１） 特開２００１−２３８１８９（第３頁、図１） 特開平１０−２４８０６３（第２頁、第６頁、図１） 特開昭６３−２５２０７１（第３頁、図１） 特開平６−２４５１６２（第３頁、図１） 特開昭６４−００１３７８（第１頁、図１）

携帯端末によるＴＶ電話通信は、画像データのエンコード処理／デコード処理を連続的に実行するというシステム負荷の高い状態において、例えばメール受信のような、非同期に発生する他のイベントにも即座に対応する必要があるという観点から、通信中のシステム負荷の軽減が望まれている。

また、携帯端末は限られた電力量しか持たないにもかかわらず、通話時間や待ち受け時間などの運用時間の延長を求められているという観点から、端末上で実行されるあらゆる機能において、よりいっそうの消費電力の削減も求められている。

ＴＶ電話のユーザは、送信画像データ／受信画像データのうち、より関心のある画像データを大画面に表示すると考えられるため、大画面に表示されるように設定されている画像データの画質やフレームレートは不用意に落とすべきではない。フレームレートは画像データの表示品質を左右するからである。

一方、小画面に表示されるように設定されている画像データは、大画面に表示される画像データに比較して、ユーザの関心度がより低い画像データであり、ユーザにストレスを与えない範囲でその表示フレームレートを下げることが可能と考えられる。さらに、小画面フレームを作成する処理（図７のステップＤ３）は、現実にシステムとしてかなりの量の負荷となっている。したがって、この小画面表示フレームレートの抑制は、ＴＶ電話通信中の処理の負荷軽減につながる。しかしながら、従来のＴＶ電話システムでは、画面表示の大小を考慮した上での負荷軽減は行われていない。

上記の従来技術について個々に検証する。特許文献１記載の技術は、ＴＶ電話通信中の通信環境の劣化に応じて、送信側システムが送信画像データ量を間引くことにより、負荷軽減を実現している。また、特許文献２記載の技術および特許文献３記載の技術は、ＴＶ電話通信中、電力の残量に応じて画像データエンコード処理の能力を調整することにより、負荷軽減を実現している。

これらの方法によればＴＶ電話通信中の負荷軽減は可能だが、最近の一般的な画面表示方法にあるようにユーザが大小の各画面に表示する画像データを選択可能な場合において、ユーザが画面表示をどのように設定しているかという点に関係なく画像データを間引いてしまうため、ユーザに与えるストレスが大きくなる可能性がある。

例えば、システム側の自動制御によって、大画面に表示している画像データのフレームレートが低く、小画面に表示しているフレームレートが高い状態が発生した場合、ユーザの関心度がより高い画像データの表示品質が低下することになる。上記の例のような大画面の表示品質の低下は、ＴＶ電話の画面表示を設定したユーザの希望に相反してしまうものであり、負荷軽減の方法に関して改善の余地がある。

一方、特許文献４，特許文献５および特許文献６それぞれに記載の技術は、ひとつの表示装置に大小２つの画面を表示する。特許文献４記載の技術および特許文献５記載の技術は、フィールドの間引き方法および読み出し方法の工夫により、小画面表示に要する処理を削減しており、特許文献４記載の技術および特許文献６記載の技術は、小画面表示に要するメモリを削減している。しかし、これらの技術は、主な表示装置としてインターレス走査を行う装置を想定している。携帯端末における走査方法はこのような走査方法と合致するとは限らず、適用が容易ではない。

そこで、本発明の第１の目的は、大小画面の表示が可能な携帯端末においてＴＶ電話通信中のシステム負荷の軽減を実現する携帯ＴＶ電話システムを提供することにある。

また、本発明の第２の目的は、携帯端末において小画面の表示品質に関してユーザの希望に対応しながら、ＴＶ電話通信中のシステム負荷の軽減を実現する携帯ＴＶ電話システムを提供することにある。

また、本発明の第３の目的は、携帯端末において小画面の表示品質に関してシステムの持つ電力の残量に対応しながら、ＴＶ電話通信中のシステム負荷の軽減を実現する携帯ＴＶ電話システムを提供することにある。

上記の目的を達成するために、請求項１記載の発明は、送信画像データと受信画像データの表示手段として大小２つの画面を有し、携帯端末に組み込まれている携帯ＴＶ電話システムにおいて、大画面への表示データと小画面への表示データのユーザが選択可能な組合せパターンについて、小画面フレーム作成を実行する間隔を示す小画面更新頻度を付加した定義テーブルを保持し、小画面更新頻度に基づいて、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引くことを特徴とする携帯ＴＶ電話システムである。

また、請求項２記載の発明は、ユーザの操作によりＴＶ電話の開始および終了並びにＴＶ電話時の大画面設定および小画面設定等を通知する外部操作入力管理部（図１の１２）と、ＴＶ電話通信における送信画像データ１フレーム分を自システムでの表示用に作成して送信フレーム画バッファに格納する送信フレーム画作成部（図１の２）と、ＴＶ電話通信における受信画像データ１フレーム分を自システムでの表示用に作成して受信フレーム画バッファに格納する受信フレーム画作成部（図１の３）と、送信フレーム画バッファ（図１の６４）または受信フレーム画バッファ（図１の６５）に格納されている画像データを大画面表示用または小画面表示用に加工し、加工済みの画像データを大画面バッファ（図１の６２）または小画面バッファ（図１の６３）に格納する画像変換部（図１の４）と、大画面バッファまたは小画面バッファに格納されている画像データをＶＲＡＭバッファ（図１の６１）に反映する表示制御部（図１の５）と、表示制御部の制御のもとでＶＲＡＭバッファ上の各種情報や画像を表示する表示部と、外部操作入力管理部からの通知に応答して、上記送信フレーム画作成部，受信フレーム画作成部，画像変換部および表示制御部に指示を出すことによりＴＶ電話通信を管理するＴＶ電話管理部（図１の１１）とで構成され、ＴＶ電話管理部は、大画面への表示データと小画面への表示データのユーザが選択可能な組合せパターンについて、小画面フレーム作成を実行する間隔を示す小画面更新頻度を付加した定義テーブル（図２）を保持し、小画面更新頻度に基づいて、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引くことを特徴とする携帯ＴＶ電話システムである。

以上のような構成を採用した結果、大小画面の表示が可能な携帯端末において、小画面表示フレームレートの抑制により、小画面フレーム作成に起因するシステム負荷を軽減できるようになる。

更に、請求項３記載の発明は、請求項１または請求項２に記載の発明において、小画面更新頻度をユーザが指定する手段を設けたことを特徴とする。このため、ユーザの必要性を上回るフレームレートでの小画面表示を抑制し、不要な小画面フレーム作成に起因するシステム負荷を軽減できる。

また、請求項４記載の発明は、請求項１または請求項２に記載の発明において、小画面更新頻度を電力の残量に応じて決定する手段を設けたことを特徴とする。このため、電力の残量が低下している状態での小画面表示を抑制し、小画面フレーム作成に起因するシステム負荷を軽減できる。

本発明の効果は、小画面表示を行う場合に一定のタイミングで小画面フレーム作成を間引きすることとしたので、小画面表示を行う場合のシステム負荷を軽減できるということである。

このような小画面フレーム作成の間引きによるシステム負荷の軽減は、システムの持つ処理能力を、通信状態の監視や画像データのエンコード処理／デコード処理、および非同期に発生する他のイベントの処理等により多く割り当てることにつながり、ＴＶ電話通信の動作の安定につながる。また、小画面フレーム作成を間引くという点においては、画像データ処理の実行回数の削減が消費電力の軽減につながる。

また、小画面表示のフレームレートをユーザの指定に基づいて決定し、その決定に対応するタイミングで小画面フレーム作成を間引きすることにより、ユーザの意思によって小画面表示を行う場合のシステム負荷を軽減できる。

また、小画面表示のフレームレートをシステムの持つ電力の残量に基づいて決定し、その決定に対応するタイミングで小画面フレーム作成を間引きすることにより、システムの持つ電力の残量によって、小画面表示を行う場合のシステム負荷を軽減できる。

更に、本発明は、従来のＴＶ電話システムへの適用が容易であり、ユーザに与えるストレスが著しく増大することはない。

本発明は、小画面への表示画像データに対するユーザの関心度が大画面への表示画像データに比べて低い点に着目し、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引き、これによってシステム負荷の軽減を図ったものである。

本発明の携帯ＴＶ電話システムは、送信画像データと受信画像データの表示手段として大小２つの画面を有し、携帯端末に組み込まれている携帯ＴＶ電話システムシステムにおいて、大画面への表示データと小画面への表示データのユーザが選択可能な組合せパターンについて、小画面フレーム作成を実行する間隔を示す小画面更新頻度を付加した定義テーブルを保持し、小画面更新頻度に基づいて、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引くことを特徴とするものである。

図１は、本発明が適用される携帯ＴＶ電話システム（以下、「システム」と記す）のブロック図である。このシステムは、携帯端末に組み込まれており、大小２つの画像データを同時に表示することができる。

図１において、メイン制御部１は、ＴＶ電話通信に関連のある各部を統括して制御することにより、通信相手と映像や音声による通信を実現し、ＴＶ電話管理部１１および外部操作入力管理部１２から成る。ＴＶ電話管理部１１は、図２に示す大／小画面表示設定の定義例を保持している。図２の定義例は、先に図６に示した定義例に小画面更新頻度を付加したものである。この小画面更新頻度は小画面フレーム作成を実行する間隔を示すものである。

図２では、パターンNo.２とパターンNo.４について、小画面更新頻度を「Ｎ回につき１回」となるように定義している。よって、（Ｎ−１）回連続して小画面フレーム作成を間引いた後、１回の小画面フレーム作成を行うという処理を繰り返す。この場合、例えば、画像変換部４に対して入力となる画像のフレームレートが１５フレーム／秒であれば、小画面表示のフレームレートは（１５／Ｎ）フレーム／秒となる。

外部操作入力部７は数字キーや各種機能を動作させる機能キー等から成り、これより入力されたユーザの要求や指示は外部操作入力管理部１２に通知される。外部操作入力管理部１２は、ユーザの操作によりＴＶ電話の開始および終了、並びにＴＶ電話時の大画面設定および小画面設定等をＴＶ電話管理部１１に通知する。ＴＶ電話管理部１１は、外部操作入力管理部１２からの通知に応答して、下記の送信フレーム画作成部２，受信フレーム画作成部３，画像変換部４および表示制御部５に指示を出すことによりＴＶ電話通信を管理する。

送信フレーム画作成部２は、カメラ部２１およびカメラ制御部２２から成り、ＴＶ電話管理部１１の指示により、ＴＶ電話通信における送信画像データ１フレーム分を自システムでの表示用に作成し、送信フレーム画バッファ６４に格納し、その処理完了をＴＶ電話管理部１１に通知する。送信画像データとしては、カメラ部２１等の画像取得手段により取得した画像データや、自システムが予め保持している固定の画像データ等が挙げられる。図１では、送信画像データは自システムの持つカメラ部２１により取得された画像データである場合を示すこととしている。

カメラ部２１はシステムの持つ画像入力手段である。カメラ制御部２２は、カメラ部２１を制御し、カメラ部２１からの入力画像データを送信フレーム画バッファ６４に格納する。１フレーム分を格納する毎にＴＶ電話管理部１１に１フレーム作成完了を通知する。ここで、送信フレーム画バッファ６４に格納される画像データのフォーマットはＹＵＶ形式である。

なお、送信画像データを自システムが予め保持している固定の画像データとする場合は、図１において、送信フレーム画作成部２は、カメラ部２１の代わりに固定画像データ保存部２１、カメラ制御部２２の代わりに固定画像データ制御部２２を備え、固定画像データ制御部２２が、固定画像データ保存部２１より固定画像データを読み出し、送信フレーム画バッファ６４に格納する。

受信フレーム画作成部３は、デコーダ３１およびデコーダ制御部３２から成り、ＴＶ電話管理部１１の指示により、ＴＶ電話通信における受信画像データ１フレーム分を自システムでの表示用に作成し、受信フレーム画バッファ６５に格納し、その処理完了をＴＶ電話管理部１１に通知する。受信画像データとしては、相手システムの持つカメラ等の画像取得手段により取得した画像データや、相手システムが予め保持している固定の画像データ等が挙げられる。これらの受信画像データはＴＶ電話通信用のプロトコル部により受信フレーム画作成部３に入力される。ただし、図１では、ＴＶ電話通信用プロトコル部の図示を省略している。

デコーダ部３１は受信画像データをデコードする手段である。デコーダ制御部３２は、ＴＶ電話通信用プロトコル部から入力される受信画像データをデコーダ部３１によってデコードし、デコード済み画像データを受信フレーム画バッファ６５に格納する。１フレーム分を格納する毎にＴＶ電話管理部１１に１フレーム作成完了を通知する。ここで、受信フレーム画バッファ６５に格納される画像データフォーマットはＹＵＶ形式である。

画像変換部４は、ＴＶ電話管理部１１の指示により送信フレーム画バッファ６４または受信フレーム画バッファ６５に格納されている画像データを大画面表示用または小画面表示用に加工し、加工済みの画像データを大画面バッファ６２または小画面バッファ６３に格納する。

ここで、図２の定義をＴＶ電話管理部１１にて保持しているので、外部操作入力管理部１２から通知されるユーザの指定と照らし合わせることにより、ＴＶ電話管理部１１が画像変換部４に指示を出す。例えば、ユーザの指定が図２のパターンNo.４と一致する場合、ＴＶ電話管理部１１は、受信画像データを大画面表示用に加工し、送信画像データを小画面表示用に加工するよう画像変換部４に指示を出す。このパターンでは、小画面はＮ回に１回の頻度で更新される。

なお、一般的に、自システムから送信する画像が画面表示データとして設定されている場合、その表示品質は、送信フレーム画作成部２へ入力される画像のフレームレートに依存する。すなわち、システムの持つ画像データ取得手段の画像取込みレートに依存する。また、相手システムから送信されてくる画像が画面表示データとして設定されている場合、その表示品質は、受信フレーム画作成部３へ入力される画像のフレームレートに依存する。すなわち、相手システムが送信データのエンコード時に定める、画像データのフレームレートに依存する。

画像変換部４は、画像サイズ変換部４１とＹＵＶ→ＲＧＢ変換部４２から成る。画像サイズ変換部４１は、送信フレーム画バッファ６４または受信フレーム画バッファ６５に格納されている画像データを、ＴＶ電話管理部１１の指示に基づき、大画面表示用または小画面表示用の画像データとするためのサイズ変換を行う。

一般的に、画像変換部４に対して入力となる画像データのサイズは大画面表示サイズと等しく、小画面表示サイズは入力画像データサイズの１／２〜１／４とする場合が多い。例えば、入力となる画像データサイズがQCIF、大画面表示サイズがQCIF、小画面表示サイズがQCIFの１／４である場合、大画面表示用の画像データ作成においては特にサイズ変換は必要ないこととなり、小画面表示用の画像データ作成においては入力画像データの連続する４ピクセル中３ピクセルを間引き、残りの１ピクセル分のみを表示用の画像データとする。

ＹＵＶ→ＲＧＢ変換部４２は、サイズ変換した画像データをＹＵＶ形式からＲＧＢ形式に変換する。この変換は、一定の変換式に基づき、Ｙ要素，Ｕ要素，Ｖ要素からＲ要素，Ｇ要素，Ｂ要素を求めることにより行う。これ以降、大画面表示用の画像データ加工処理を「大画面フレーム作成」と記載し、小画面表示用の画像データ加工処理を「小画面フレーム作成」と記載する。

表示制御部５は、ＶＲＡＭバッファ６１を管理するもので、ＴＶ電話管理部１１の指示により、大画面バッファ６２または小画面バッファ６３に格納されている画像データをＶＲＡＭバッファ６１に格納する。表示制御部５は大／小画面合成制御部５１を備えている。大／小画面合成制御部５１は、大画面バッファ６２または小画面バッファ６３に格納されているデータをＶＲＡＭに反映する。

画像データ格納メモリ６は、上記のＶＲＡＭバッファ６１，大画面バッファ６２，小画面バッファ６３，送信フレーム画バッファ６４および受信フレーム画バッファ６５から成る。表示部８は、液晶ディスプレイなどであって、表示制御部５の制御の下にＶＲＡＭバッファ６１上の各種情報や画像を表示する。
［動作の説明］
次に、以上のように構成された本システムにおける小画面表示処理を図３のフローチャートを参照して以下に説明する。

図３はＴＶ電話管理部１１によって実行される第１の動作例を説明するためのフローチャートである。ＴＶ電話管理部１１には、小画面フレーム作成の間引きを管理するために「小画面間引き管理フラグ」が用意されている。このフラグの初期状態の値を「０」とし、小画面フレーム作成を間引く毎にフラグの値をインクリメントする。

先ず、ユーザが外部操作入力部７を操作して通話を開始し、送信フレーム画または受信フレーム画の作成完了が通知されると（図３のステップＡ１）、ステップＡ１で作成されたフレーム画が小画面８２に表示するべき画像データであるかを判定する（ステップＡ２）。この判定では、判定を実行する時点でのユーザの指定と、図２に示したパターンとを照らし合わせて結果を出す。なお、ステップＡ１における作成完了は、ＴＶ電話管理部１１が、送信フレーム画作成部２から送信フレーム画バッファ６４の更新完了を通知された場合、または受信フレーム画作成部３から受信フレーム画バッファ６５の更新完了を通知された場合を示す。

図３では、小画面以外の表示処理に関しては省略しているため、ステップＡ２において、小画面表示を行わない場合はＴＶ電話終了判定（ステップＡ８）に移行する。一方、小画面表示設定を行う場合には小画面間引き管理フラグを参照する（ステップＡ３）。ステップＡ３では、ＴＶ電話管理部１１が画像変換部４に小画面バッファ６３の更新を指示するかどうかを判定する。この判定時に小画面間引き管理フラグの値が（Ｎ−１）より小さい場合は、間引きタイミングと判定し、小画面フレーム作成を間引く。すなわち、画像変換部４への指示を行わず、小画面フレーム作成は行わない。そして、小画面間引き管理フラグをインクリメントし（ステップＡ４）、ＴＶ電話終了判定（ステップＡ８）に移行する。

一方、ステップＡ３での判定時にフラグの値が（Ｎ−１）であった場合は、（Ｎ−１）回の間引きを完了した状態であり、更新タイミング（予めシステムにデフォルトを設定しておく）と判定し、小画面フレーム作成を実行する（ステップＡ５）。ステップＡ５では、画像変換部４に小画面バッファ６３の更新を指示する。画像変換部４は、ステップＡ１で作成されたフレーム画を読み出し、小画面フレーム作成を実行し、小画面バッファ６３に変換後のデータを格納する。
そして、小画面間引き管理フラグを初期化（ステップＡ６）した上で、ステップＡ５で作成された小画面フレームのデータを小画面バッファ６３に格納し、表示制御部５に指示を出すことにより、小画面バッファ６３の内容がＶＲＡＭバッファ６１に反映される（ステップＡ７）。これにより、小画面８２に画像が表示される。

以上のステップＡ１からステップＡ８までの手順がＴＶ電話終了（ステップＡ８）まで繰り返される。

このように、上記構成のシステムでは、小画面表示を行うかどうかを判定し、小画面表示を行う場合には、システムに予め設定されているデフォルトのタイミングに従い、小画面フレーム作成を間引きするようにしている。したがって、上記構成のシステムでは、ユーザにストレスを与えない機能の制御によって、システム負荷を軽減することができる。

実施例１では、ＴＶ電話管理部１１は予め設定されているデフォルトの間引きタイミングに従って小画面フレーム作成を間引きすることとしているが、この間引きタイミングをユーザからの指定に応じて可変にしてもよい。図４はそのような構成を採用した場合の動作を説明するためのフローチャートであり、ＴＶ電話管理部１１によって実行される。図４は図３の冒頭にステップＢ０を付加したものとなっている。

実施例２では、外部操作入力部７にてユーザが小画面表示品質を指定することとし、それをＴＶ電話機能の実行時に、図２の小画面更新頻度、すなわち小画面間引きタイミング設定（図４のステップＢ０）に反映させる。そして、小画面間引きタイミングの判定処理に使用する（ステップＢ３）。なお、小画面間引きタイミングの設定はＴＶ電話実行中にも変更可能としてもよい。

この実施例２によれば、ユーザの必要性を上回る頻度での小画面表示フレームレートを抑制するので、ユーザの意思によりシステム負荷を軽減することができる。

実施例１および実施例２では、ＴＶ電話管理部１１は予め設定されているタイミングに従って、小画面フレーム作成を間引きすることとしているが、このタイミングを電力の残量に応じて可変にしてもよい。図５はそのような構成を採用した場合の動作を説明するためのフローチャートであり、ＴＶ電話管理部１１によって実行される。図５は図３の冒頭にステップＣ０を付加したものとなっている。

実施例３では、ＴＶ電話管理部１１にて、電力の残量に応じて、図２の小画面更新頻度、すなわち小画面間引きタイミング設定（図５のステップＣ０）に反映させる。そして、それをＴＶ電話機能の実行時に小画面間引きタイミングの判定処理（ステップＣ３）に使用する。なお、ステップＣ０に示す小画面更新タイミングの設定は、ＴＶ電話実行中にも変更可能としてもよい。

この実施例３によれば、電力の残量低下に伴い、小画面フレーム作成を間引く回数を増やし、小画面表示フレームレートを小さくする。したがって、電力の残量が低下している状態での小画面表示フレームレートを抑制し、システム負荷を軽減することができる。

本発明が適用される携帯ＴＶ電話システムを示すブロック図 本発明が採用する大／小画面表示設定の定義例を表示する図 本発明の実施例１による小画面表示処理を説明するフローチャート 本発明の実施例２による小画面表示処理を説明するフローチャート 本発明の実施例３による小画面表示処理を説明するフローチャート 従来技術における大／小画面表示設定の定義例を表示する図 従来のＴＶ電話システムによる小画面表示処理を説明するフローチャート ＴＶ電話システムにおける画面表示例を示す図

符号の説明

１ メイン制御部
２ 送信フレーム画作成部
３ 受信フレーム画作成部
４ 画像変換部
５ 表示制御部
６ 画像データ格納メモリ
７ 外部操作入力部
８ 表示部
１１ ＴＶ電話管理部
１２ 外部操作入力管理部
２１ カメラ部
２２ カメラ制御部
３１ デコーダ部
３２ デコーダ制御部
４１ 画面サイズ変換部
４２ ＹＵＶ→ＲＧＢ変換部
５１ 大／小画面合成制御部
６１ ＶＲＡＭバッファ
６２ 大画面バッファ
６３ 小画面バッファ
６４ 送信フレーム画バッファ
６５ 受信フレーム画バッファ
８１ 大画面
８２ 小画面
８３ 関連情報領域

Claims (4)

1. 送信画像データと受信画像データの表示手段として大小２つの画面を有し、携帯端末に組み込まれている携帯ＴＶ電話システムシステムにおいて、
   大画面への表示データと小画面への表示データのユーザが選択可能な組合せパターンについて、小画面フレーム作成を実行する間隔を示す小画面更新頻度を付加した定義テーブルを保持し、
   前記小画面更新頻度に基づいて、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引くことを特徴とする携帯ＴＶ電話システム。
2. ユーザの操作によりＴＶ電話の開始および終了並びにＴＶ電話時の大画面設定および小画面設定等を通知する外部操作入力管理部と、
   ＴＶ電話通信における送信画像データ１フレーム分を自システムでの表示用に作成して送信フレーム画バッファに格納する送信フレーム画作成部と、
   ＴＶ電話通信における受信画像データ１フレーム分を自システムでの表示用に作成して受信フレーム画バッファに格納する受信フレーム画作成部と、
   送信フレーム画バッファまたは受信フレーム画バッファに格納されている画像データを大画面表示用または小画面表示用に加工し、加工済みの画像データを大画面バッファまたは小画面バッファに格納する画像変換部と、
   大画面バッファまたは小画面バッファに格納されている画像データをＶＲＡＭバッファに反映する表示制御部と、
   表示制御部の制御のもとでＶＲＡＭバッファ上の各種情報や画像を表示する表示部と、
   前記外部操作入力管理部からの通知に応答して、上記送信フレーム画作成部，受信フレーム画作成部，画像変換部および表示制御部に指示を出すことによりＴＶ電話通信を管理するＴＶ電話管理部とで構成され、
   前記ＴＶ電話管理部は、大画面への表示データと小画面への表示データのユーザが選択可能な組合せパターンについて、小画面フレーム作成を実行する間隔を示す小画面更新頻度を付加した定義テーブルを保持し、前記小画面更新頻度に基づいて、小画面への画像データ表示に必要となる画像データのＲＧＢ化およびサイズ変換を間引くことを特徴とする携帯ＴＶ電話システム。
3. 前記小画面更新頻度をユーザが指定する手段を設けたことを特徴とする請求項１または請求項２に記載の携帯ＴＶ電話システム。
4. 前記小画面更新頻度を電力の残量に応じて決定する手段を設けたことを特徴とする請求項１または請求項２に記載の携帯ＴＶ電話システム。
   

Images