JP2007068167A

JP2007068167A - イメージ伝送方法及びこれを実行する移動通信端末機

Info

Publication number: JP2007068167A
Application number: JP2006227168A
Authority: JP
Inventors: Mae Kyun Doo; 梅均杜
Original assignee: LG Electronics Inc
Current assignee: LG Electronics Inc
Priority date: 2005-08-26
Filing date: 2006-08-23
Publication date: 2007-03-15
Also published as: CN1921548A; EP1758397A3; EP1758397A2; KR100686019B1; US7812988B2; US20070047018A1

Abstract

【課題】イメージ伝送可能な移動通信端末機において、ビデオ通話中に、送信者の映像に文字を合成し、その合成イメージを伝送できるようにする。
【解決手段】移動通信端末機のイメージ伝送方法は、ａ）画像イメージを生成する段階と、ｂ）文字部分と背景部分とを含んで構成された文字イメージを生成する段階と、ｃ）文字イメージの背景部分を画像イメージで塗りつぶすことによって、画像イメージに文字イメージの文字部分を挿入し、文字イメージと画像イメージとを合成する段階と、ｄ）合成した合成イメージを伝送する段階と、を含んで構成されることを特徴とする。
【選択図】図４

Description

本発明は、移動通信端末機に係り、特に、キャプチャしたイメージ（映像）を加工して伝送できる移動通信端末機及びその方法に関する。

近来、情報通信分野の目覚ましい発展に伴い、情報及び通信環境も急激に変化しつつある。かかる変化の一つとして代表的なものが移動通信端末機である。移動通信端末機は、現代社会において必需品であり、需要者等の要求も多様化しつつある。これら要求に応えて、移動通信端末機では、一般的な音声通話のほか、ビデオ通話（video call）やテレビ電話（video telephone）などの種々の機能が付加されている。

一般に、“ビデオ通話またはテレビ電話”とは、通話をする当事者同士が、お互いの顔を端末機のディスプレイで見ながら通話できる機能のことをいう。これは、通話中に、移動通信端末機が、ユーザの顔画像をキャプチャして、通信相手の移動通信端末機に伝送すると共に、その通信相手の移動通信端末機から相手の顔画像を受信して、これをディスプレイに表示する。これにより、通話当事者は、お互いの顔を見ながら通話をすることができるので、より親密にライブ感のある通話が可能になる。

しかしながら、既存のビデオ通話の可能な移動通信端末機は、ユーザの顔画像のみを伝送するレベルに留まっており、その顔画像に特定文字を合成して伝送することができる移動通信端末機は未だ開発されていない。

そこで、本発明は、ビデオ通話中に、キャプチャしたユーザの顔画像や種々の画像イメージに特定文字を合成して伝送することができる移動通信端末機及びこれを用いたイメージ（映像）伝送方法を提供することを目的とする。

このような目的を達成する本発明の移動通信端末機のイメージ伝送方法は、ａ）画像イメージを生成する段階と、ｂ）文字部分と背景部分とを含んで構成された文字イメージを生成する段階と、ｃ）前記文字イメージの前記背景部分を前記画像イメージで塗りつぶすことによって、前記画像イメージに前記文字イメージの前記文字部分を挿入し、前記文字イメージと前記画像イメージとを合成して合成イメージを生成する段階と、ｄ）前記合成イメージを伝送する段階と、を含んで構成されることを特徴とする。

この場合、前記ｂ）段階において、前記背景部分が、前記文字部分とは異なる特定の一色で構成されるとよい。また、前記ｂ）段階は、ｂ−１）ディスプレイに文字イメージ作成用窓を提供する段階と、ｂ−２）前記文字イメージ作成用窓に入力された文字を文字イメージに変換する段階と、を含んで構成されることを特徴とする。

前記文字イメージ作成用窓に入力された文字の大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節可能であるとよい。また、前記ｂ−２）段階において、前記文字は、大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節された状態で文字イメージに変換されるとよい。

前記ｂ）段階は、前記文字イメージ作成用窓に入力された文字を保存する段階をさらに含んで構成されることを特徴とする。前記文字は、テキストファイル形式で保存されるとよい。

前記ｂ−２）段階において、前記保存した文字を読み込んで、前記文字イメージ作成用窓に出力するとよい。

前記ｃ）段階は、前記文字イメージと前記画像イメージとの各々対応した位置にあるピクセルを、ピクセル毎に１対１マッチングし、前記文字イメージのうち前記特定色の前記背景部分の各ピクセルを、これに対応する前記画像イメージのピクセルに置き換えることによって、前記文字イメージと前記画像イメージとを合成すると好ましい。なお、前記画像イメージは、動画映像であるとよい。

また、本発明では、前述の目的を達成する移動通信端末機を提供する。この移動通信端末機は、カメラで撮像された映像をキャプチャして画像イメージを生成する画像イメージ生成モジュールと、文字部分と背景部分とを含んで構成された文字イメージのうち前記背景部分を、前記画像イメージで塗りつぶすことによって、前記画像イメージに前記文字イメージの前記文字部分を挿入し、前記画像イメージと前記文字イメージとを合成して合成イメージを生成するイメージ合成モジュールと、前記合成イメージを伝送する伝送モジュールと、を含んで構成されたことを特徴とする。

ここで、前記背景部分は、前記文字部分とは異なる特定の一色で構成されるとよい。

この移動通信端末機は、使用者が文字を入力する文字イメージ作成用窓を提供し、該文字イメージ作成用窓を介して入力された文字を、文字部分と背景部分とを含んで構成される文字イメージに変換する文字イメージ生成モジュールをさらに含んで構成されたことを特徴とする。

前記文字イメージ生成モジュールは、使用者の入力操作によって、入力される文字の大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節されるように構成されるとよい。また、前記文字イメージ生成モジュールは、前記文字を、大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節された状態で文字イメージに変換するとよい。

さらに、移動通信端末機は、前記文字イメージ作成用窓に入力された文字を保存するメモリモジュールをさらに含んで構成されたことを特徴とする。ここで、前記文字は、テキストファイル形式で保存されるとよい。この場合、前記文字イメージ生成モジュールは、前記メモリモジュールに保存した文字を読み込んで、前記文字イメージ作成用窓に出力するとよい。

前記イメージ合成モジュールは、前記文字イメージと前記画像イメージとの各々対応した位置にあるピクセルを、ピクセル毎に１対１マッチングし、前記文字イメージのうち前記特定色の前記背景部分の各ピクセルを、これに対応する前記画像イメージのピクセルに置き換えることによって、前記合成イメージを生成すると好ましい。なお、前記画像イメージは、動画映像であるとよい。

本発明によるイメージ伝送方法及びこれを実行する移動通信端末機によれば、ビデオ通話中に、通話者の映像に特定文字を合成した画像イメージを通信相手に伝送できるようになる。

上述の目的及び特徴は、添付図面及び下記の詳細な説明によって、より明確になる。以下、添付図面を参照しつつ、上記目的を達成する本発明の好適な一実施形態を詳細に説明する。

図１は、本発明の一実施形態に係る移動通信端末機の構成を概略的に示したブロック図である。図１に示したように、本発明の一実施形態に係る移動通信端末機１は、画像イメージ生成モジュール１０、文字イメージ生成モジュール３０、メモリモジュール５０、キー入力モジュール６０、制御モジュール７０、イメージ合成モジュール７５、ディスプレイモジュール８０、及び伝送モジュール９０を含んで構成されている。もちろん、本発明に係る移動通信端末機１には、前述した構成要素のほかにも、その他構成要素（例えば、音声通信モジュールやカメラ等（図示略））を備えているが、これら構成要素は、本発明と直接的に関連するものではないので、その説明及び図示を適宜省略するものとする。

画像イメージ生成モジュール１０は、本発明の一実施形態による移動通信端末機の使用者（以下、‘通話者’という。）が、通信相手に伝送する画像イメージを生成する。画像イメージ生成モジュール１０は、移動通信端末機１が備えるカメラ（図示せず）を含んで構成されており、該カメラで撮像した通話者の顔画像などをキャプチャして画像イメージを生成する。また、外部カメラ（図示略）等で撮像してキャプチャしたイメージ（映像）を、移動通信端末機１のＩ／Ｏポート（図示略）から受信し、これを画像イメージとする構成にしてもよい。ここで、画像イメージとは、静止映像（still image）及び動画映像の双方を含む意味で使用する。なお、通話開始前に、画像イメージ生成モジュール１０で画像イメージを生成し、これをメモリモジュール５０に保存しておき、通話の際に、その保存した画像イメージを使用してビデオ通話する形態とすることもできる。

文字イメージ生成モジュール３０は、画像イメージに合成する文字イメージを生成する。文字イメージ生成モジュール３０は、ディスプレイモジュール８０の画面に、所定の文字イメージ作成用窓を提供する。そして、移動通信端末機１の使用者が、キー入力モジュール６０を操作して文字を文字イメージ作成用窓を介して入力すると、入力文字を、画像イメージとの合成に適合するように、文字部分と背景部分（これについては後述する）とを含んで構成される文字イメージに変換する。

以下、図２を参照して、文字イメージ作成用窓を介した、文字イメージに変換される文字を入力する方法を説明する。図２は、文字の入力用に、画面に表示された文字イメージ作成用窓を示した図である。図２に示すように、端末機使用者は、文字イメージ作成用窓に文字を入力できる（図２（２−１）参照）。この場合、文字入力前の事前設定または入力後の編集操作によって、文字の大きさ（図２（２−２）参照）、色（図示略）、書体（図２（２−３）参照）、及び文字イメージ作成用窓内における位置（図２（２−４）参照）のうち少なくとも一つを変更することができる。

ここで、入力された文字は、メモリモジュール５０にテキストファイル形式で保存可能である。もちろん、入力された文字を、文字イメージに変換して、イメージファイル形式で保存するようにしてもよい。従って、文字イメージ生成モジュール３０は、保存したテキストファイル形式の文字を読み込んで、これを画像イメージに合成する文字イメージに変換することができ、保存したイメージファイル形式の文字イメージを読み込み、これを画像イメージとの合成用に使用することもできる。

一方、端末機の外部から別の文字テキストファイルまたは文字イメージファイルを、端末機Ｉ／Ｏポート（図示せず）を介して受信し、これをメモリモジュール５０に保存した後、画像イメージとの合成に用いる文字イメージとしてもよい。

メモリモジュール５０は、端末機１に必要な各種データ及びプログラムを保存するためのもので、特に、前述したように、文字テキストファイル及び／または文字イメージファイルと、画像イメージファイルとを保存することができる。

キー入力モジュール６０は、ユーザの操作によって、端末機１に各種情報または命令を入力するためのもので、特に、前述したように、文字イメージ作成用窓への文字入力を可能にする。

制御モジュール７０は、端末機の全般的な動作を制御するもので、イメージ合成モジュール７５を含んで構成されている。このイメージ合成モジュール７５については、本発明の一実施形態によるイメージ合成方法と関連付けて後述する。なお、イメージ合成モジュール７５は、制御モジュール７０とは別個に分離して設けたモジュールとして設けることもできる。

伝送モジュール９０は、画像イメージと文字イメージとを合成した合成イメージを、通信相手に伝送する。

以下、図３及び図４を参照して、上述のように構成された移動通信端末機で実行される本発明の一実施形態に係るイメージ合成方法を説明する。図３は、画像イメージに文字イメージを合成した合成イメージを示し、図４は、文字イメージと画像イメージとを合成する流れを示したフローチャートである。

まず、画像イメージ生成モジュール１０によって、通信相手に伝送する画像イメージを、図３（ａ）に示したようにキャプチャする。その後、文字イメージ生成モジュール３０は、文字イメージ作成用窓をディスプレイに提供する。使用者のキー入力操作によって、画像イメージに合成する文字が入力されると、文字イメージ生成モジュール３０は、その入力文字の文字イメージを図３（ｂ）に示したように生成する（図４のＳ１００）。

この場合、文字イメージは、画像イメージとの合成が容易なように、次の条件に合致する。図３（ｂ）に示すように、文字イメージは、文字部分Ａと背景部分Ｂとで構成される。背景部分Ｂは、単一色である。一方、文字部分Ａは、背景部分Ｂの色とは異なる色であり、単一色または複数色とすることができる。

その後、生成された画像イメージ及び文字イメージは、イメージ合成モジュール７５で合成される（図４のＳ２００）。イメージ合成モジュール７５は、文字イメージのうち、任意の特定単色からなる背景部分Ｂを画像イメージＣでフィル（fill）する（塗りつぶす）ことによって、文字イメージと画像イメージとを合成する。具体的には、イメージ合成モジュール７５は、文字イメージと画像イメージとの各々対応した位置にあるピクセルを、ピクセル毎に１対１マッチングし、文字イメージのうち、任意の特定単色からなる背景部分Ｂのピクセルを、これに対応する画像イメージＣのピクセルに置き換える（すなわち、文字イメージのうち、背景部分Ｂを除く文字部分Ａを、画像イメージＣに挿入する）ことによって、両イメージを合成する。

画像イメージと文字イメージとを合成するより詳細な流れを、図５を参照して説明する。なお、図４において、文字イメージの背景部分Ｂの色を赤（red）とした。

まず、イメージ合成モジュール７５は、文字イメージ（図３（ｂ）参照）を、ｘ軸（０≦ｘ≦ａ）及びｙ軸（０≦ｙ≦ｂ）に沿って１ピクセルずつチェックし、そのピクセルの色が赤色であるか否かを確認する（Ｓ２１０）。

文字イメージのピクセルが赤色であると（Ｓ２２０（Ｙｅｓ））、そのピクセルを、これに対応した位置にある画像イメージのピクセルに置換する（Ｓ２３０）。一方、文字イメージのピクセルが赤色でなければ、画像イメージのピクセルに置換しない（Ｓ２２０（Ｎｏ））。

その後、前述の処理を全てのピクセルに対して行う（Ｓ２４０〜Ｓ２７０）。図５のＳ２３０以降のフローは、当該技術分野における当業者であれば、前述した説明から容易に理解できるので詳細な説明は省略する。

最終的に、以上のように合成した合成イメージを、伝送モジュール９０を介して通信相手に伝送する（図４のＳ３００）。そして、合成イメージは、図６（ａ）に示すように通信相手の端末機にピクチャインピクチャ形態で表示される。このとき、イメージを伝送した通話者の端末機は、ユーザの設定や選択に応じて、伝送している合成イメージを、図６（ｂ）に示すように画面の一部に表示させて、伝送イメージを確認できるように構成してもよい。

本発明は、本発明の精神及び必須特徴を逸脱しない範囲で、他の形態に具体化できることは、当業者にとって自明である。従って、上記の詳細な説明は、あらゆる面において制約的ではなく例示的なものとして解釈されるべきである。よって、本発明の範囲は、添付の特許請求の範囲の合理的解釈によって定めなければならず、本発明の等価的範囲内での変更は、いずれも本発明の範囲に含まれる。

本発明の一実施形態に係る移動通信端末機の構成を概略的に示すブロック図である。文字入力用に移動通信端末機のディスプレイに提供される文字イメージ作成用窓を説明する図である。本発明の一実施形態に従う文字イメージと画像イメージとを合成する合成イメージを説明する図である。本発明の一実施形態に従う移動通信端末機で実行されるイメージ合成方法のフローチャートである。図４のイメージ合成段階（Ｓ２００）の詳細なフローチャートである。本発明の一実施形態に従う移動通信端末機のビデオ通話画面を示す図である。

符号の説明

１移動通信端末機
１０画像イメージ生成モジュール
３０文字イメージ生成モジュール
５０メモリモジュール
６０キー入力モジュール
７０制御モジュール
７５イメージ合成モジュール
８０ディスプレイモジュール
９０伝送モジュール

Claims

ａ）画像イメージを生成する段階と、
ｂ）文字部分と背景部分とを含んで構成された文字イメージを生成する段階と、
ｃ）前記文字イメージの前記背景部分を前記画像イメージで塗りつぶすことによって、前記画像イメージに前記文字イメージの前記文字部分を挿入し、前記文字イメージと前記画像イメージとを合成して合成イメージを生成する段階と、
ｄ）前記合成イメージを伝送する段階と、
を含んで構成されることを特徴とする移動通信端末機のイメージ伝送方法。
前記ｂ）段階において、
前記背景部分が、前記文字部分とは異なる特定の一色で構成されることを特徴とする請求項１に記載の移動通信端末機のイメージ伝送方法。
前記ｂ）段階は、
ｂ−１）ディスプレイに文字イメージ作成用窓を提供する段階と、
ｂ−２）前記文字イメージ作成用窓に入力された文字を文字イメージに変換する段階と、
を含んで構成されることを特徴とする請求項２に記載の移動通信端末機のイメージ伝送方法。
前記文字イメージ作成用窓に入力された文字の大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節可能であることを特徴とする請求項３に記載の移動通信端末機のイメージ伝送方法。
前記ｂ−２）段階において、
前記文字は、大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節された状態で文字イメージに変換されることを特徴とする請求項４に記載の移動通信端末機のイメージ伝送方法。
前記ｂ）段階は、
前記文字イメージ作成用窓に入力された文字を保存する段階をさらに含んで構成されることを特徴とする請求項３に記載の移動通信端末機のイメージ伝送方法。
前記文字は、テキストファイル形式で保存されることを特徴とする請求項６に記載の移動通信端末機のイメージ伝送方法。
前記ｂ−２）段階において、
前記保存した文字を読み込んで、前記文字イメージ作成用窓に出力することを特徴とすする請求項６に記載の移動通信端末機におけるイメージ伝送方法。
前記ｃ）段階は、
前記文字イメージと前記画像イメージとの各々対応した位置にあるピクセルを、ピクセル毎に１対１マッチングし、前記文字イメージのうち前記特定色の前記背景部分の各ピクセルを、これに対応する前記画像イメージのピクセルに置き換えることによって、前記文字イメージと前記画像イメージとを合成することを特徴とする請求項２に記載の移動通信端末機のイメージ伝送方法。
前記画像イメージは、動画映像であることを特徴とする請求項１に記載の移動通信端末機のイメージ伝送方法。
カメラで撮像された映像をキャプチャして画像イメージを生成する画像イメージ生成モジュールと、
文字部分と背景部分とを含んで構成された文字イメージのうち前記背景部分を、前記画像イメージで塗りつぶすことによって、前記画像イメージに前記文字イメージの前記文字部分を挿入し、前記画像イメージと前記文字イメージとを合成して合成イメージを生成するイメージ合成モジュールと、
前記合成イメージを伝送する伝送モジュールと、
を含んで構成されたことを特徴とする移動通信端末機。
前記背景部分は、前記文字部分とは異なる特定の一色で構成されることを特徴とする請求項１１に記載の移動通信端末機。
使用者が文字を入力する文字イメージ作成用窓を提供し、該文字イメージ作成用窓を介して入力された文字を、文字部分と背景部分とを含んで構成される文字イメージに変換する文字イメージ生成モジュールをさらに含んで構成されたことを特徴とする請求項１１に記載の移動通信端末機。
前記文字イメージ生成モジュールは、使用者の入力操作によって、入力される文字の大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節されるように構成されたことを特徴とする請求項１３に記載の移動通信端末機。
前記文字イメージ生成モジュールは、前記文字を、大きさ、色、書体、及び前記文字イメージ作成用窓内における位置のうち少なくとも一つが調節された状態で文字イメージに変換することを特徴とする請求項１４に記載の移動通信端末機。
前記文字イメージ作成用窓に入力された文字を保存するメモリモジュールをさらに含んで構成されたことを特徴とする請求項１３に記載の移動通信端末機。
前記文字は、テキストファイル形式で保存されることを特徴とする請求項１６に記載の移動通信端末機。
前記文字イメージ生成モジュールは、前記メモリモジュールに保存した文字を読み込んで、前記文字イメージ作成用窓に出力することを特徴とする請求項１６に記載の移動通信端末機。
前記イメージ合成モジュールは、前記文字イメージと前記画像イメージとの各々対応した位置にあるピクセルを、ピクセル毎に１対１マッチングし、前記文字イメージのうち前記特定色の前記背景部分の各ピクセルを、これに対応する前記画像イメージのピクセルに置き換えることによって、前記合成イメージを生成することを特徴とする請求項１２に記載の移動通信端末機。
前記画像イメージは、動画映像であることを特徴とする請求項１１に記載の移動通信端末機。