JP2004215238A - 移動通信端末機の映像オーバーレイ装置 - Google Patents

Abstract

【課題】 移動通信端末機の情報を示すグラフィックデータと、カメラにより入力された映像データ及びＭＰＥＧ−４コーデックにより復元された映像データとを所定比率に混合することで、グラフィックデータと映像データとをオーバーレイし得る移動通信端末機の映像オーバーレイ装置を提供しようとする。
【解決手段】 第１映像データ及び第２映像データ中少なくとも一つを出力するマルチプレクサ２０５と、前記第１及び第２映像データ中少なくとも一つとグラフィックデータとを所定比率にオーバーレイさせるビデオオーバーレイ部２０６と、を包含して移動通信端末機の映像オーバーレイ装置を構成する。
【選択図】 図１

Description

本発明は、移動通信端末機に係るもので、詳しくは、移動通信端末機のＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）画面にディスプレイされるグラフィックデータ、前記移動通信端末機に付着されたカメラにより入力された映像及びＭＰＥＧ−４（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ−４）映像をディスプレイし得るようにした移動通信端末機に関するものである。

現在、移動通信端末機には、その機能が進歩するにつれて、単純な無線通信手段だけでなく、カメラ機能及びマルチメディア再生機能のように、無線通信以外の機能が付加されている。このようなカメラ機能及びマルチメディア再生機能は、移動通信端末機のディスプレイ装置の改善及び高速通信の実現により、順次大衆化されている高級機能であって、高解像度のデジタルカメラ及びカラーＬＣＤ画面を備えた移動通信端末機は、既に一般化されつつある。

前記移動通信端末機のカラーＬＣＤ画面には、各種の情報を示すアイコン（例えば、受信感度、バッテリ容量、メッセージ及びベル／振動）及びメニューを表示するためのグラフィックデータがディスプレイされ、カメラにより入力される映像（Ｖｉｄｅｏ）及びＭＰＥＧ−４コーデック（Ｃｏｄｅｒ ａｎｄ Ｄｅｃｏｄｅｒ；Ｃｏｄｅｃ）によりデコーディングされたストリーミング（Ｓｔｒｅａｍｉｎｇ）映像信号がディスプレイされることもある。以下、このような機能を支援する従来移動通信端末機の構成について、図６を参照して説明する。

図６は多様な映像データのディスプレイが可能な従来移動通信端末機を示したブロック構成図で、図示されたように、このような従来移動通信端末機は、各種の構成要素を制御するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、イメージセンサを利用してデジタル方式に映像を撮影するためのカメラモジュール１０２と、前記ＣＰＵ１０１から入力されたグラフィックデータ、ＭＰＥＧ−４ストリーミングビデオデータ及び前記カメラモジュールから入力された映像データを圧縮／復元するＭＰＥＧ−４ビデオコーデック１０３と、前記圧縮／復元されたデータをディスプレイするためのＬＣＤ１０４と、を包含して構成されている。

このとき、前記ＭＰＥＧ−４ビデオコーデック１０３は、前記ＣＰＵ１０１とグラフィックデータ及び制御信号を取り交わすホストインターフェース１０３１と、前記カメラモジュール１０２からデジタル映像信号が入力されたカメラインターフェース１０３４と、前記カメラモジュール１０２から入力された前記デジタル映像信号をＭＰＥＧ−４標準により圧縮するか、又は前記ＣＰＵ１０１から入力されたＭＰＥＧ−４ストリーミングデータを復元するビデオ処理部１０３２と、それら各装置間の動作及びデータの処理過程を調整するための調整回路部（Ａｒｂｉｔｒａｔｉｏｎ Ｃｉｒｃｕｉｔ Ｕｎｉｔ）１０３３と、前記カメラモジュールから入力された映像データ及び前記ビデオ処理部で復元された映像データを格納するメモリ１０３５と、前記ＬＣＤ１０４にデータ及び制御信号を提供するＬＣＤインターフェース１０３６と、から構成されている。

以下、このように構成された従来移動通信端末機のディスプレイ動作を３種類に大別して説明する。

前記移動通信端末機のＬＣＤ画面による３種類のディスプレイ動作は、前記移動通信端末機の多様な情報を示す各種のメニューやアイコンなどを表示するためのグラフィックデータのディスプレイと、カメラモジュールにより撮影された映像データのディスプレイと、ビデオサーバからダウンロードされたＭＰＥＧ−４ビデオストリーミングデータに対する復元映像データのディスプレイ動作と、に区分される。

まず、前記グラフィックデータのディスプレイ動作は、前記移動通信端末機のメニュー、各種のアイコン及び背景画面に対するディスプレイを示したものであって、前記グラフィックデータは、前記ＣＰＵ１０１から提供された前記移動通信端末機の情報を示すデータ及び前記移動通信端末機の動作に必要なクロックや同期信号に基づいて、前記ホストインターフェース１０３１、前記調整回路部１０３３及び前記ＬＣＤインターフェース１０３６を夫々通して前記ＬＣＤにディスプレイされる。

又、前記カメラモジュールから入力された映像データのディスプレイ動作は、前記カメラモジュールから入力された映像データを一つのイメージに圧縮して前記メモリ１０３５に格納するか、又は入力される映像データを実時間に前記ＬＣＤ１０４にディスプレイする動作を示したものである。前記カメラモジュール１０２から入力される実時間のデジタルＲ、Ｇ、Ｂ（Ｒｅｄ、Ｇｒｅｅｎ、Ｂｌｕｅ）信号は、前記カメラインターフェース１０３４、前記ビデオ処理部１０３２、前記調整回路部１０３３及び前記ＬＣＤインターフェース１０３６を夫々通して前記ＬＣＤ１０４にディスプレイする。又、前記メモリ１０３５に格納されるイメージは、前記調整回路部１０３３及び前記ホストインターフェース１０３１を通して前記ＣＰＵ１０１に入力されて、所定形式（例えば、ＪＰＧ）に圧縮された後、前記メモリ１０３５に格納される。

又、前記ＭＰＥＧ−４ストリーミング映像データを復元した映像データのディスプレイ動作は、ビデオサーバ（図示せず）から入力されたＭＰＥＧ−４ストリーミング映像データを元の映像データに復元してディスプレイする動作を示したものである。前記入力された映像データは、前記ＣＰＵ１０１から前記ホストインターフェース１０３１及び前記調整回路部１０３３を通して前記ビデオ処理部１０３２に入力される。このとき、前記ビデオ処理部１０３２は、前記入力されたＭＰＥＧ−４ストリーミング映像データを元のビデオデータに復元して出力する。又、前記調整回路部１０３３は、前記復元されたデータの入力を受けて前記ＬＣＤインターフェース１０３６を通して前記ＬＣＤ１０４にディスプレイする。

然るに、このような前記３種類のディスプレイ動作においては、前記アイコン及びメニューのようなグラフィックデータ並びに前記映像データをディスプレイする時、前記映像データを制御するためのアイコン（例えば、Ｐｌａｙ、Ｓｔｏｐ、Ｍｕｔｅ等）及び端末機の情報（例えば、受信感度、バッテリ容量等）をＬＣＤ画面の上方側や下方側に夫々表すべきであるため、映像データのディスプレイ領域が制限されるという不都合な点があった。

又、前記問題点を解決するために、移動通信端末機のＬＣＤ画面全体に映像データをディスプレイする場合、前記グラフィックデータであるアイコンや端末機のメニュー情報がディスプレイされないという不都合な点があった。

本発明は、このような従来の課題に鑑みてなされたもので、移動通信端末機の情報を示すグラフィックデータと、カメラにより入力された映像データ又はＭＰＥＧ−４コーデックにより復元された映像データとを所定比率に混合することで、グラフィックデータと映像データとをオーバーレイし得るようにした移動通信端末機の映像オーバーレイ装置を提供することを目的とする。

このような目的を達成するため、本発明に係る移動通信端末機の映像オーバーレイ装置においては、第１映像データ又は第２映像データを出力するマルチプレクサと、該マルチプレクサにより入力された前記第１又は第２映像データと端末機の情報を示すグラフィックデータとを所定比率に夫々オーバーレイさせるためのビデオオーバーレイ部と、を包含して構成されることを特徴とする。

本発明による移動通信端末機の映像オーバーレイ装置は、第１映像データ及び第２映像データ中少なくとも一つを出力するマルチプレクサと、前記第１及び第２映像データ中少なくとも一つとグラフィックデータとを所定比率に夫々オーバーレイさせるビデオオーバーレイ部と、を包含して構成されることを特徴とし、これにより上記目的を達成する。

前記マルチプレクサは、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）から提供された入力映像選択信号に基づいて、前記第１及び第２映像データ中少なくとも一つを選択的に出力することを特徴としてもよい。

前記ビデオオーバーレイ部は、前記第１及び第２映像データ中少なくとも一つをカラー信号に変換させるＣＳＣ（Ｃｏｌｏｒ Ｓｐａｃｅ Ｃｏｎｖｅｒｔ）と、装置情報を示すグラフィックデータをカラー信号に変換させるための情報からなるカラールックアップテーブルと、前記ＣＳＣで変換された映像データと前記ルックアップテーブルの情報に基づいて変換されたグラフィックデータとを混合するカラーパレット部と、前記ＣＳＣで変換された第１及び第２映像データ、前記混合された映像及びグラフィックデータ並びに前記カラールックアップテーブルに基づいて変換されたグラフィックデータ中、少なくとも一つを選択的に出力するビデオ選択部と、を包含して構成されることを特徴としてもよい。

前記カラーパレット部は、前記第１及び第２映像データ中少なくとも一つと前記グラフィックデータとを所定比率に混合することを特徴としてもよい。

前記所定比率は、前記ＣＰＵから提供された前記映像混合信号に基づいて決定されることを特徴としてもよい。

前記ビデオ選択部は、前記第１映像データ、前記第２映像データ並びに前記混合された映像及びグラフィックデータ中、少なくとも一つを選択的に出力するように構成されることを特徴としてもよい。

前記第１映像データは、前記移動通信端末機に装着されたカメラモジュールにより提供されることを特徴としてもよい。

前記第２映像データは、映像サーバからダウンロードされたＭＰＥＧ−４ストリーミング映像データにより構成されることを特徴としてもよい。

前記ＭＰＥＧ−４ストリーミング映像データは、ＭＰＥＧ−４コーデックにより復元されることを特徴としてもよい。

本発明による移動通信端末機の映像オーバーレイ装置は、ＣＰＵと、映像を撮影するカメラモジュールと、該カメラモジュールから提供されたストリーミング映像データを圧縮及び復元するビデオコーデックと、それらカメラモジュール及びビデオコーデック中、少なくとも一つから提供されたストリーミング映像データを選択的に出力するマルチプレクサと、該マルチプレクサから提供された映像データと前記ＣＰＵから提供されたグラフィックデータとがオーバーレイされたデータにするために、所定比率にオーバーレイさせるオーバーレイ部と、を包含して構成されることを特徴とし、これにより上記目的を達成する。

前記オーバーレイされたデータをディスプレイ装置に提供するＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）インターフェースを更に包含することを特徴としてもよい。

前記ＬＣＤインターフェースから提供されたオーバーレイされたデータをディスプレイするＬＣＤを更に包含することを特徴としてもよい。

前記マルチプレクサは、前記ＣＰＵから提供された映像選択信号に基づいて、前記ストリーミング映像を選択的に出力することを特徴としてもよい。

前記ビデオオーバーレイ部は、前記映像データをカラー信号に変換させるＣＳＣ（Ｃｏｌｏｒ Ｓｐａｃｅ Ｃｏｎｖｅｒｔ）により構成されることを特徴としてもよい。

前記ビデオオーバーレイ部は、前記端末機関連情報を示すグラフィックデータをカラー信号に変換させるカラールックアップテーブルを更に包含することを特徴としてもよい。

前記ビデオオーバーレイ部は、前記ＣＳＣで変換された映像データと変換されたグラフィックデータとを所定比率に混合するカラーパレット部を更に包含することを特徴としてもよい。

前記ビデオオーバーレイ部は、前記ＣＳＣで変換された映像データ、前記カラーパレット部から提供された混合された映像及びグラフィックデータ並びにカラールックアップテーブルに含まれた情報に基づいて変換されたグラフィックデータ中、少なくとも一つを選択的に出力するビデオ選択部を更に包含して構成されることを特徴としてもよい。

前記カラーパレット部は、前記第１及び第２映像データ中少なくとも一つと前記グラフィックデータとを所定比率に混合することを特徴としてもよい。

前記所定比率は、前記ＣＰＵから提供された映像混合信号に基づいて計算されることを特徴としてもよい。

前記ビデオ選択部は、前記カメラモジュールにより提供された映像データ、前記コーデックにより復元された映像データ、前記グラフィックデータ並びに前記混合された映像データ及びグラフィックデータ中、少なくとも一つを選択的に出力するように構成されることを特徴としてもよい。

前記ビデオコーデックは、ＭＰＥＧ−４ストリーミング映像データ及び前記カメラモージュルから提供された映像データを圧縮及び復元するＭＰＥＧ−４ビデオコーデックであることを特徴としてもよい。

前記オーバーレイされたデータを一時格納するメモリを更に包含することを特徴としてもよい。

本発明に係る移動通信端末機の映像オーバーレイ装置においては、前記移動通信端末機のＬＣＤ画面にディスプレイされるグラフィックデータに、カメラにより入力された映像又はＭＰＥＧ−４動映像を所望の所定比率に混合してオーバーレイし得るという効果がある。

又、前記端末機のＬＣＤ画面全体に動映像をディスプレイすると共に、前記各種の制御用アイコン及び前記端末機の状態表示用アイコンをオーバーレイして出力することで、広い画面で動映像を鑑賞し得るだけでなく、前記移動通信端末機の情報も知ることができるため、使用者の便宜性を向上し得るという効果がある。

以下、本発明の実施の形態に対し、図面に基づいて説明する。

図１は本発明に係る映像オーバーレイ装置を備えた移動通信端末機を示したブロック構成図で、図示されたように、前記移動通信端末機は、各種の構成要素を制御するＣＰＵ２０１と、イメージセンサを利用してデジタル方式に映像を撮影するためのカメラモジュール２０３と、ＭＰＥＧ−４ストリーミングビデオデータ及び前記カメラモジュールから入力された映像データを圧縮／復元するＭＰＥＧ−４ビデオコーデック２０４と、それらカメラモジュール２０３及びＭＰＥＧ−４ビデオコーデック２０４から出力される映像信号を選択的に出力するためのマルチプレクサ２０５と、該マルチプレクサ２０５により入力された映像データと前記ＣＰＵ２０１から入力されたグラフィックデータとを所定比率にオーバーレイさせるビデオオーバーレイ部２０６と、前記オーバーレイされたデータを一時格納するためのメモリ２０７と、前記オーバーレイされたデータをディスプレイ装置に出力するＬＣＤインターフェース２０８と、該ＬＣＤインターフェース２０８から出力されたデータをディスプレイするためのＬＣＤ２０９と、を包含して構成されている。

以下、このように構成された移動通信端末機の映像オーバーレイ装置に対して説明する。

まず、前記ＣＰＵ２０１は、前記マルチプレクサ２０５を包含した各種の構成要素を制御して、前記移動通信端末機の情報を示すグラフィックデータを出力し、前記ＭＰＥＧ−４ストリーミング映像データを前記ＭＰＥＧ−４コーデックにより復元した後、前記マルチプレクサ２０５に出力する。又、前記カメラモジュール２０３から入力された映像は、前記ＭＰＥＧ−４コーデック２０４により映像処理されて前記マルチプレクサ２０５に出力される。

このとき、前記マルチプレクサ２０５は、前記カメラモジュール２０３及び前記ＭＰＥＧ−４コーデック２０４から映像データの入力を受けて、前記ＣＰＵ２０１から出力された制御信号に基づいて一つの映像データを出力する。

その後、前記ビデオオーバーレイ部２０６は、前記ＣＰＵ２０１から出力された制御信号に基づいて、前記マルチプレクサ２０５から出力された映像データと前記ＣＰＵ２０１から出力されたグラフィックデータとを所定比率に混合する。このとき、前記所定比率は、予め決定された基本混合テーブルに基づいて決定される。又、前記混合された映像データは、前記メモリ２０７に格納されるか、又は前記ＬＣＤインターフェース２０８に出力される。

従って、前記ＬＣＤインターフェース２０８は、前記ビデオオーバーレイ部２０６から混合された映像データの入力を受けて前記移動通信端末機のＬＣＤ２０９を通してディスプレイする。且つ、前記ＬＣＤインターフェース２０８は、前記移動通信端末機のＬＣＤ２０９を制御するための制御信号を出力する。

図２はビデオオーバーレイ部を示したブロック構成図で、図示されたように、前記映像オーバーレイ部は、前記マルチプレクサ２０５により出力されるカメラの映像データ及び復元されたＭＰＥＧ−４映像データ（１６ビット）をカラーデータ（Ｒ、Ｇ、Ｂ、２４ビット）に変換するためのＣＳＣ（Ｃｏｌｏｒ Ｓｐａｃｅ Ｃｏｎｖｅｒｔ）３０１と、前記ＣＰＵ２０１からグラフィックデータの入力を受けてカラーデータ（Ｒ、Ｇ、Ｂ、２４ビット）に変換するためのカラールックアップテーブル３０２と、前記ＣＳＣ３０１から出力される映像データと前記カラールックアップテーブル３０２から出力されるグラフィックデータとを所定比率に混合するためのカラーパレット部３０３と、前記ＣＳＣ３０１の前記映像データ、前記カラーパレット部３０３の前記映像データ及び前記カラールックアップテーブル３０２の前記グラフィックデータを選択的に出力するビデオ選択部３０４と、該ビデオ選択部３０４から出力されるデータ及びＬＣＤディスプレイに必要な各種の同期信号を出力するためのＬＣＤインターフェース３０５と、から構成されている。

以下、前記マルチプレクサ２０５から出力された映像データと前記ＣＰＵ２０１から出力されたグラフィックデータとを所定比率に混合する前記映像オーバーレイ部の動作について、図３〜５を参照して説明する。

図３は本発明に係る各種の制御信号の動作特性を説明した図で、図示されたように、前記各制御信号としての入力映像選択信号（ＶＳ＿ＳＥＬ）、映像混合信号（Ｂ＿Ｌ）及び出力映像選択信号（ＶＩＤ＿ＳＥＬ）は、前記マルチプレクサ２０５、前記カラーパレット部３０３及び前記ビデオ選択部３０４を制御するために前記ＣＰＵ２０１の入／出力ポート（Ｇｅｎｅｒａｌ Ｐｕｒｐｏｓｅ Ｉｎｐｕｔ Ｏｕｔｐｕｔ；ＧＰＩＯ ｐｏｒｔ）を通して夫々出力される。

まず、入力映像選択信号（ＶＳ＿ＳＥＬ）は、前記マルチプレクサ４０２に入力され、前記マルチプレクサが、前記カメラモジュールから出力される映像データ及び前記ＭＰＥＧ−４コーデックにより復元された映像データ中、何れか一つを選択して出力するようになる。

又、映像混合信号（Ｂ＿Ｌ）は、前記映像データとグラフィックデータとの混合比率を調節するために前記カラーパレット部４０３１に入力される。

又、出力映像選択信号（ＶＩＤ＿ＳＥＬ）は、前記ビデオ選択部４０３２に入力されて、前記復元されたＭＰＥＧ−４映像データ、前記カメラ映像データ及びグラフィックデータ中何れか一つのデータ、又は前記映像データと前記グラフィックデータとが混合された映像データを選択的に出力させる。

図４は本発明に係る出力映像選択信号による映像出力方法を説明した図で、該図４に基づいて、前記復元されたＭＰＥＧ−４映像データ及び前記カメラ映像データをディスプレイする動作に対して説明すると、次のようである。

まず、前記マルチプレクサ２０５は、前記カメラモジュール２０３及び前記ＭＰＥＧ−４コーデック２０４から出力されるデジタルビデオデータの入力を受け、前記ＣＰＵ２０１から出力される入力映像選択信号（ＶＳ＿ＳＥＬ）に基づいて、前記カメラモジュール２０３から入力される映像データ又は前記ＭＰＥＧ−４コーデック２０４から入力される映像データ中、何れか一つの映像データを選択して前記ビデオオーバーレイ部２０６に出力する。このとき、前記カメラモジュール２０３及び前記ＭＰＥＧ−４コーデック２０４から出力されるデジタルビデオデータは、ＹＵＶ（輝度、色相）データ（１６ビット）であって、前記ＣＳＣ３０１に入力されてＲ、Ｇ、Ｂデータ（２４ビット）に変換される。

これによって、前記ビデオ選択部３０４は、前記ＣＰＵ２０１から入力された２ビット（０、１）の出力映像選択信号（ＶＩＤ＿ＳＥＬ）に基づいて前記一つの映像データを選択し、これを前記ＬＣＤインターフェース２０８に出力する。又、該ＬＣＤインターフェース２０８は、ＶＣＬＫ（Ｖｉｄｅｏ Ｐｉｘｅｌ Ｃｌｏｃｋ）、Ｖｓｙｎｃ（Ｖｅｒｔｉｃａｌ Ｓｙｎｃｈｒｏｎｏｕｓ Ｓｉｇｎａｌ）及びＨｓｙｎｃ（Ｈｏｒｉｚｏｎｔａｌ Ｓｙｎｃｈｒｏｎｏｕｓ Ｓｉｇｎａｌ）の制御信号及び８ビット（３サイクルに一つの２４ビットのピクセルデータ）の映像データを前記ＬＣＤ２０９に出力してディスプレイさせる。

以下、各種のアイコン、メニュー及び背景画面のようなグラフィックデータをディスプレイする動作について説明する。

まず、前記カラールックアップテーブルは、前記ＣＰＵ２０１から入力されたグラフィックデータ（１６ビット）をＲ、Ｇ、Ｂデータ（２４ビット）に変換させる。又、前記ビデオ選択部３０４は、前記ＣＰＵ２０１から入力された２ビット（０、０）の出力映像選択信号（ＶＩＤ＿ＳＥＬ）に基づいて前記グラフィックデータを選択し、これを前記ＬＣＤインターフェース２０８に出力する。又、該ＬＣＤインターフェース２０８は、ＶＣＬＫ、Ｖｓｙｎｃ及びＨｓｙｎｃの制御信号及び８ビット（３サイクルに一つの２４ビットのピクセルデータ）の映像データを前記ＬＣＤ２０９に出力してディスプレイさせる。

以下、映像データ（ＭＰＥＧ−４データ及びカメラデータ）とグラフィックデータとを混合してディスプレイするビデオオーバーレイの動作について説明する。

まず、前記カラーパレット部３０３は、前記マルチプレクサ２０５から出力された前記復元されたＭＰＥＧ−４データ及び前記カメラ映像データが前記ＣＳＣ３０１によりＲ、Ｇ、Ｂデータに変換されたデータの入力を受け、前記ＣＰＵ２０１から出力されたグラフィックデータがカラールックアップテーブル３０２によりＲ、Ｇ、Ｂデータに変換されたデータの入力を受ける。このとき、前記カラーパレット部は、２ビット（１、０）の出力映像選択信号（ＶＩＤ＿ＳＥＬ）に基づいて、前記ＣＳＣから入力されたデータと前記カラールックアップテーブルから入力されたデータとを所定比率に混合する。以下、前記入力された各データの混合方法について、図５を参照して説明する。

図５は本発明に係る映像混合比率を示す映像混合テーブルで、図示されたように、前記カラーパレット部３０３は、前記ＣＰＵ２０１から出力された４ビットの映像混合信号（Ｂ＿Ｌ）に基づいて、予め決定された映像混合テーブルの所定比率から前記入力された各データの混合比率を決定する。従って、前記カラーパレット部３０３は、前記ＣＳＣ３０１から入力される映像データと前記カラールックアップテーブル３０２から入力されるグラフィックデータとを前記映像混合テーブルに基づいて所定比率に夫々混合し、これを前記ビデオ選択部３０４に出力する。

以下、前記映像混合テーブルに基づいて所定比率に混合する過程について説明する。

例えば、前記移動通信端末機のＬＣＤは、前記映像混合信号（Ｂ＿Ｌ）のビット組合せが‘０、１、０、０’の時、前記グラフィックデータの混合比率は１００％になり、前記映像データの混合比率は０％になるため、前記グラフィックデータのみがディスプレイされる。その反面、前記ＬＣＤは、前記映像混合信号（Ｂ＿Ｌ）のビット組合せが‘０、１、０、１’の時、前記グラフィックデータの混合比率は０％になり、映像データの混合比率は１００％になるため、前記映像データのみがディスプレイされる。

且つ、前記移動通信端末機のＬＣＤは、前記映像混合信号（Ｂ＿Ｌ）のビット組合せが‘１、０、１、０’の時、前記グラフィックデータの混合比率は２５％になり、前記映像データの混合比率は７５％になるため、前記映像データに前記グラフィックデータを若干オーバーレイしてディスプレイする。

又、前記ビデオ選択部３０４は、前記ＣＰＵ２０１から入力された２ビット（１、０）の出力映像選択信号（ＶＩＤ＿ＳＥＬ）に基づいて、前記グラフィックデータと前記映像データとが混合されたデータ（Ｂｌｅｎｄｉｎｇ ｄａｔａ）を選択して前記ＬＣＤインターフェース２０８に出力する。又、前記ＬＣＤインターフェース２０８は、ＶＣＬＫ、Ｖｓｙｎｃ、Ｈｓｙｎｃの制御信号及び８ビット（３サイクルに一つの２４ビットのピクセルデータ）の映像データを前記ＬＣＤ２０９に出力してディスプレイする。

以上説明したように、本発明に係る移動通信端末機の映像オーバーレイ装置においては、前記移動通信端末機のＬＣＤ画面にディスプレイされるグラフィックデータに、カメラにより入力された映像又はＭＰＥＧ−４動映像を所望の所定比率に混合してオーバーレイし得るという効果がある。

又、前記端末機のＬＣＤ画面全体に動映像をディスプレイすると共に、前記各種の制御用アイコン及び前記端末機の状態表示用アイコンをオーバーレイして出力することで、広い画面で動映像を鑑賞し得るだけでなく、前記移動通信端末機の情報も知ることができるため、使用者の便宜性を向上し得るという効果がある。

尚、本発明の技術的範囲は、明細書の詳細な説明に記載された内容に限定されるものでなく、特許請求の範囲により定められるべきである。

移動通信端末機の情報を示すグラフィックデータと、カメラにより入力された映像データ及びＭＰＥＧ−４コーデックにより復元された映像データとを所定比率に混合することで、グラフィックデータと映像データとをオーバーレイし得る移動通信端末機の映像オーバーレイ装置を提供しようとする。

第１映像データ及び第２映像データ中少なくとも一つを出力するマルチプレクサ２０５と、前記第１及び第２映像データ中少なくとも一つとグラフィックデータとを所定比率にオーバーレイさせるビデオオーバーレイ部２０６と、を包含して移動通信端末機の映像オーバーレイ装置を構成する。

以上のように、本発明の好ましい実施形態を用いて本発明を例示してきたが、本発明は、この実施形態に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。

本発明に係るビデオオーバーレイ装置を備えた移動通信端末機を示したブロック構成図である。 本発明に係るビデオオーバーレイ部を示したブロック構成図である。 本発明に係る各制御信号の動作特性を説明した図である。 本発明に係る出力映像選択信号による映像の出力方法を説明した図である。 本発明に係る映像混合比率を示した映像混合テーブルである。 従来のグラフィック及び映像をディスプレイし得る移動通信端末機を示したブロック構成図である。

符号の説明

２０１：ＣＰＵ
２０２：ホストバス
２０３：カメラモジュール
２０４：ＭＰＥＧ−４コーデック
２０５：マルチプレクサ
２０６：ビデオオーバーレイ部
２０７：メモリ
２０８：ＬＣＤインターフェース
２０９：ＬＣＤ
３０１：ＣＳＣ
３０２：カラールックアップテーブル
３０３：カラーパレット部
３０４：ビデオ選択部

Claims (22)

1. 第１映像データ及び第２映像データ中少なくとも一つを出力するマルチプレクサと、
   前記第１及び第２映像データ中少なくとも一つとグラフィックデータとを所定比率に夫々オーバーレイさせるビデオオーバーレイ部と、を包含して構成されることを特徴とする移動通信端末機の映像オーバーレイ装置。
2. 前記マルチプレクサは、
   ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）から提供された入力映像選択信号に基づいて、前記第１及び第２映像データ中少なくとも一つを選択的に出力することを特徴とする請求項１記載の移動通信端末機の映像オーバーレイ装置。
3. 前記ビデオオーバーレイ部は、
   前記第１及び第２映像データ中少なくとも一つをカラー信号に変換させるＣＳＣ（Ｃｏｌｏｒ Ｓｐａｃｅ Ｃｏｎｖｅｒｔ）と、
   装置情報を示すグラフィックデータをカラー信号に変換させるための情報からなるカラールックアップテーブルと、
   前記ＣＳＣで変換された映像データと前記ルックアップテーブルの情報に基づいて変換されたグラフィックデータとを混合するカラーパレット部と、
   前記ＣＳＣで変換された第１及び第２映像データ、前記混合された映像及びグラフィックデータ並びに前記カラールックアップテーブルに基づいて変換されたグラフィックデータ中、少なくとも一つを選択的に出力するビデオ選択部と、を包含して構成されることを特徴とする請求項２記載の移動通信端末機の映像オーバーレイ装置。
4. 前記カラーパレット部は、
   前記第１及び第２映像データ中少なくとも一つと前記グラフィックデータとを所定比率に混合することを特徴とする請求項３記載の移動通信端末機の映像オーバーレイ装置。
5. 前記所定比率は、
   前記ＣＰＵから提供された前記映像混合信号に基づいて決定されることを特徴とする請求項４記載の移動通信端末機の映像オーバーレイ装置。
6. 前記ビデオ選択部は、
   前記第１映像データ、前記第２映像データ並びに前記混合された映像及びグラフィックデータ中、少なくとも一つを選択的に出力するように構成されることを特徴とする請求項４記載の移動通信端末機の映像オーバーレイ装置。
7. 前記第１映像データは、前記移動通信端末機に装着されたカメラモジュールにより提供されることを特徴とする請求項１記載の移動通信端末機の映像オーバーレイ装置。
8. 前記第２映像データは、映像サーバからダウンロードされたＭＰＥＧ−４ストリーミング映像データにより構成されることを特徴とする請求項１記載の移動通信端末機の映像オーバーレイ装置。
9. 前記ＭＰＥＧ−４ストリーミング映像データは、ＭＰＥＧ−４コーデックにより復元されることを特徴とする請求項８記載の移動通信端末機の映像オーバーレイ装置。
10. ＣＰＵと、
    映像を撮影するカメラモジュールと、
    該カメラモジュールから提供されたストリーミング映像データを圧縮及び復元するビデオコーデックと、
    それらカメラモジュール及びビデオコーデック中、少なくとも一つから提供されたストリーミング映像データを選択的に出力するマルチプレクサと、
    該マルチプレクサから提供された映像データと前記ＣＰＵから提供されたグラフィックデータとがオーバーレイされたデータにするために、所定比率にオーバーレイさせるオーバーレイ部と、を包含して構成されることを特徴とする移動通信端末機の映像オーバーレイ装置。
11. 前記オーバーレイされたデータをディスプレイ装置に提供するＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）インターフェースを更に包含することを特徴とする請求項１０記載の移動通信端末機の映像オーバーレイ装置。
12. 前記ＬＣＤインターフェースから提供されたオーバーレイされたデータをディスプレイするＬＣＤを更に包含することを特徴とする請求項１１記載の移動通信端末機の映像オーバーレイ装置。
13. 前記マルチプレクサは、
    前記ＣＰＵから提供された映像選択信号に基づいて、前記ストリーミング映像を選択的に出力することを特徴とする請求項１０記載の移動通信端末機の映像オーバーレイ装置。
14. 前記ビデオオーバーレイ部は、
    前記映像データをカラー信号に変換させるＣＳＣ（Ｃｏｌｏｒ Ｓｐａｃｅ Ｃｏｎｖｅｒｔ）により構成されることを特徴とする請求項１０記載の移動通信端末機の映像オーバーレイ装置。
15. 前記ビデオオーバーレイ部は、
    前記端末機関連情報を示すグラフィックデータをカラー信号に変換させるカラールックアップテーブルを更に包含することを特徴とする請求項１０記載の移動通信端末機の映像オーバーレイ装置。
16. 前記ビデオオーバーレイ部は、
    前記ＣＳＣで変換された映像データと変換されたグラフィックデータとを所定比率に混合するカラーパレット部を更に包含することを特徴とする請求項１４記載の移動通信端末機の映像オーバーレイ装置。
17. 前記ビデオオーバーレイ部は、
    前記ＣＳＣで変換された映像データ、前記カラーパレット部から提供された混合された映像及びグラフィックデータ並びにカラールックアップテーブルに含まれた情報に基づいて変換されたグラフィックデータ中、少なくとも一つを選択的に出力するビデオ選択部を更に包含して構成されることを特徴とする請求項１６記載の移動通信端末機の映像オーバーレイ装置。
18. 前記カラーパレット部は、
    前記第１及び第２映像データ中少なくとも一つと前記グラフィックデータとを所定比率に混合することを特徴とする請求項１６記載の移動通信端末機の映像オーバーレイ装置。
19. 前記所定比率は、
    前記ＣＰＵから提供された映像混合信号に基づいて計算されることを特徴とする請求項１８記載の移動通信端末機の映像オーバーレイ装置。
20. 前記ビデオ選択部は、
    前記カメラモジュールにより提供された映像データ、前記コーデックにより復元された映像データ、前記グラフィックデータ並びに前記混合された映像データ及びグラフィックデータ中、少なくとも一つを選択的に出力するように構成されることを特徴とする請求項１７記載の移動通信端末機の映像オーバーレイ装置。
21. 前記ビデオコーデックは、
    ＭＰＥＧ−４ストリーミング映像データ及び前記カメラモージュルから提供された映像データを圧縮及び復元するＭＰＥＧ−４ビデオコーデックであることを特徴とする請求項１０記載の移動通信端末機の映像オーバーレイ装置。
22. 前記オーバーレイされたデータを一時格納するメモリを更に包含することを特徴とする請求項１０記載の移動通信端末機の映像オーバーレイ装置。

Images