JP5973798B2 - ＶｏＩＰ基盤音声通話時の音声認識を用いた広告提供システム及びその方法 - Google Patents

Description

本発明の実施形態は、ＶｏＩＰ（Ｖｏｉｃｅ ｏｖｅｒ Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）基盤の音声通話時の音声認識（ｖｏｉｃｅ ｒｅｃｏｇｎｉｔｉｏｎ）を用いて広告を提供するシステム及びその方法に関する。

通信技術の発展に伴って、いわゆる音声パケット網であるボイス オーバー インターネット プロトコル（ＶｏＩＰ：Ｖｏｉｃｅ ｏｖｅｒ Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）を介して通話をすることのできるスマートフォンなどのモバイル端末が急速に普及している。

ＶｏＩＰ基盤音声通話は、ユーザの音声をデジタル化して送信する技術であり、これを用いるモバイル端末は、従来の第２世代移動通信システム（いわゆる、「２Ｇ」）のネットワークを利用する機器とは異なり音声通話機能以外にデータ送信機能などの様々な付加機能を提供することができる。

したがって、このような付加機能を用いて、ユーザの通話時にモバイル端末に広告を表示させることができるが、このときに、各ユーザの好みに合った広告を表示しなければ、購買行為には繋がらない。

したがって、ＶｏＩＰ基盤音声通話時にユーザの好みに合った広告を提供できる方法の研究が要望されている。

一方、通信及び映像技術の発展に伴って、携帯端末及び固定端末を介して提供される映像通話の利用が増加している。

さらに、スマートフォン（Ｓｍａｒｔ Ｐｈｏｎｅ）、タブレットＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、デスクトップ（Ｄｅｓｋｔｏｐ）等のユーザ端末を用いるユーザが増加するに伴い、多様なソーシャルネットワークサービス（ＳＮＳ）がユーザ端末を介して提供されている。

ソーシャルネットワークサービス（ＳＮＳ）は、インターネットにおいてユーザ自身を中心に他のユーザ達と社会的関係を形成し、一人のユーザが関心及び個性などを他のユーザと互いに共有できるようにするサービスである。

したがって、社会的関係を形成しているユーザ達が映像通話を行う場合、通話者間の社会的関係を利用して、通話者全員が関心のある広告を提供できる技術もまた要望されている。

ＶｏＩＰ基盤音声通話時の音声認識に基づいて通話中のユーザ達の話題に適合した広告を表示することのできる広告提供システム及びその方法を提供する。

ＶｏＩＰ基盤音声通話時のユーザ間に表示された広告情報を同期化できる広告提供システム及びその方法を提供する。

社会的関係を形成しているユーザ達が映像通話をする場合、通話者間で形成された社会的関係を示すソーシャル情報を用いて選択したターゲット広告を提供することのできる広告提供システム及びその方法を提供する。

ソーシャル情報を用いて通話者間に同期化されたターゲット広告を提供することによって、通話者が広告主の商品またはサービス購買意欲を引き起こすことができるようにする広告提供システム及びその方法を提供する。

本発明の一実施形態において、ＶｏＩＰ（Ｖｏｉｃｅ ｏｖｅｒ Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）基盤広告情報提供システムは、ユーザ端末のアプリケーションを介して受信した音声情報を認識する音声認識部と、前記音声情報をテキスト情報に変換する情報変換部と、データベースに格納された複数の広告情報のうち前記テキスト情報に該当する広告情報を選択する広告選択部と、前記選択された広告情報を送信する送信部とを含んでもよい。

本発明の一実施形態によると、前記送信部は、前記音声情報とは別のパケットトンネルを介して前記広告情報を差出人のアプリケーション及び受信人のアプリケーションに送信し、前記広告情報の送信時に前記テキスト情報を共に送信してもよい。

他の実施形態によると、前記テキスト情報からキーワードを抽出するキーワード抽出部をさらに含み、前記データベースは前記広告情報をそれぞれのキーワード別に該当するカテゴリーに格納し、前記広告選択部は前記抽出されたキーワードを含むカテゴリーから前記広告情報を選択してもよい。

また、他の実施形態によると、広告選択情報を受信すると、該当するウェブページを差出人のアプリケーション及び受信人のアプリケーションに送信する広告情報同期化部をさらに含んでもよい。

また、他の実施形態によると、映像通話を行おうとする通話者のソーシャル情報を用いてターゲット広告を選択するターゲット広告選択部及び前記ターゲット広告を前記ユーザ端末に送信するターゲット広告送信部をさらに含んでもよい。

また、他の実施形態によると、前記ターゲット広告送信部は、前記選択されたターゲット広告が前記通話者のユーザ端末に表示されるように、前記選択されたターゲット広告を通話者間に同期化して送信し、前記通話者のうちのいずれか一人によって前記ターゲット広告が選択された場合、前記ターゲット広告を選択した通話者と前記通話者の通話相手等の別の通話者に前記選択されたターゲット広告に関するウェブページを送信してもよい。

また、他の実施形態によると、前記ターゲット広告送信部は、前記ユーザ端末の画面分割によって、前記ターゲット広告及び前記映像通話中の通話相手に関する映像情報が共に表示されるように制御するための表示制御情報、前記ユーザ端末の全体画面に前記ターゲット広告が表示されるように制御するための表示制御情報、及び前記ユーザ端末の全体画面上に映像通話中の通話相手に関する映像情報が表示され、前記表示された映像情報の上に前記ターゲット広告がオーバラップ（ｏｖｅｒｌａｐ）されて表示されるように制御するための表示制御情報のうち少なくとも１つを送信してもよい。

また、他の実施形態によると、前記ターゲット広告選択部は、前記通話者の地域情報、性別情報、年齢情報、職業情報、学歴情報、関心分野情報のうち少なくとも１つを含むユーザ情報を用いて前記通話者の関係情報を生成し、広告主が申請した１つ以上の広告が格納された広告データベースから前記関係情報に該当するターゲット広告を選択してもよい。

また、他の実施形態によると、前記ターゲット広告選択部は、前記通話者の映像通話の背景情報（ｂａｃｋｇｒｏｕｎｄ ｉｎｆｏｍａｔｉｏｎ）及び前記通話者の音声情報を用いて抽出した少なくとも１つのキーワードに基づいて前記ターゲット広告を選択してもよい。

また、他の実施形態によると、前記通話者のうち少なくとも１人が前記ターゲット広告を選択したか否かに基づいて前記通話者間の映像通話費用を算出する費用算出部をさらに含んでもよい。

また、他の実施形態によると、広告主が申請した１つ以上の広告が格納された広告データベース及び前記ソーシャル情報が格納されたソーシャルデータベースを含み、前記ターゲット広告選択部は、映像通話を試みる前記通話者に反応して、前記ソーシャルデータベースから前記通話者に関するソーシャル情報を取得してもよい。

ＶｏＩＰ基盤広告情報提供装置は、アプリケーションを介して受信した音声情報を認識する音声認識モジュールと、前記音声情報をテキスト情報に変換する情報変換モジュールと、広告情報提供サーバに前記テキスト情報を送信する送信モジュールと、前記広告情報提供サーバから受信した前記テキスト情報に該当する広告情報と前記変換されたテキスト情報とを表示する表示モジュールとを含んでもよい。

ＶｏＩＰ基盤広告情報提供方法は、広告情報提供サーバがユーザ端末のアプリケーションを介して受信した音声情報を認識し、前記音声情報をテキスト情報に変換し、データベースに格納された複数の広告情報のうち前記テキスト情報に該当する広告情報を選択し、前記選択された広告情報を送信することを含んでもよい。

ＶｏＩＰ基盤広告情報提供方法は、ユーザ端末がアプリケーションを介して受信した音声情報を認識し、前記音声情報をテキスト情報に変換し、広告情報提供サーバに前記テキスト情報を送信し、前記広告情報提供サーバから受信した前記テキスト情報に該当する広告情報と前記変換されたテキスト情報とを表示することを含み、更に、前記広告情報提供サーバが前記ユーザ端末から広告選択情報を受信すると、前記広告選択情報に該当するウェブページを差出人のアプリケーション及び受信人のアプリケーションに送信することを含んでもよい。

ＶｏＩＰ基盤音声通話時に音声情報をテキスト情報に変換してこれに基づいて通話内容に該当する広告情報を選択するためユーザ達の話題に適合した広告を提供することができる。

ユーザから広告情報が指示される場合、前記広告情報に対するウェブページを前記ユーザ及び前記ユーザと通話中のユーザに提供することによってユーザ間に表示する広告情報を同期化することができる。

社会的関係を形成しているユーザ達が映像通話をする場合、通話者間の社会的関係を示すソーシャル情報を用いて選択したターゲット広告を提供することができる。

ソーシャル情報を用いて通話者間に同期化されたターゲット広告を提供することによって、通話者に広告主の商品またはサービス購買を誘引することができる。

本発明の一実施形態において、広告情報提供システムを示すブロック図である。 本発明の他の実施形態において、広告情報提供システムを示すブロック図である。 本発明の一実施形態において、広告情報提供装置を示すブロック図である。 本発明の一実施形態において、ユーザ端末上に広告情報及びテキスト情報が表示されることを示す例示図である。 本発明の一実施形態において、広告情報提供システムにおいて表示制御情報を用いてターゲット広告を表示する例を示す図である。 本発明の一実施形態において、広告情報提供システムにおいて表示制御情報を用いてターゲット広告と映像情報とを共に表示する例を示す図である。 本発明の一実施形態において、広告情報提供システムにおいて表示制御情報を用いて映像情報と前記映像情報にオーバラップするターゲット広告とを表示する例を示す図である。 本発明の一実施形態において、広告情報提供システムが広告情報を提供する方法を説明するためのフローチャートである。 本発明の他の実施形態において、広告情報提供システムが広告情報提供する方法を説明するためのフローチャートである。 本発明の一実施形態において、広告情報提供装置が広告情報を提供する方法を説明するためのフローチャートである。

以下、本発明の実施形態を添付する図面を参照しながら詳細に説明する。

図１は、本発明の一実施形態において、広告情報提供システムを示すブロック図である。図面を参照すれば、広告情報提供システム１００は、音声認識部１１０、情報変換部１２０、広告選択部１３０、データベース１４０、及び送信部１５０を含む。

ユーザ端末には、ＶｏＩＰ（Ｖｏｉｃｅ ｏｖｅｒ Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）を利用した音声通話を可能にするアプリケーションが格納される。ユーザが通話を実行すると、前記アプリケーションは、通話を行うユーザに反応してユーザの音声をデジタル化して音声情報を生成し、これを広告情報提供システム１００に送信する。

音声認識部１１０は、ユーザ端末のアプリケーションから受信した音声情報を認識する。

情報変換部１２０は、音声認識部１１０で認識した音声情報をテキスト情報に変換する。

広告選択部１３０は、データベース１４０に格納された複数の広告情報のうち情報変換部１２０で変換されたテキスト情報に該当する広告情報を選択する。

ここで、情報変換部１２０は、テキスト情報を分析してキーワードを抽出してもよい。この場合、広告選択部１３０は、情報変換部１２０から抽出されたキーワードに基づいて、前記ユーザに提供する広告情報をデータベース１４０から選択してもよい。

しかし、他の実施形態として、広告情報提供システム１００（図示なし）は、テキスト情報からキーワードを抽出するキーワード抽出部を別に備え、前記情報変換部１２０で変換されたテキスト情報に基づいて、コンテキスト（ｃｏｎｔｅｘｔ）分析によってキーワードを抽出してもよい。この場合、広告選択部１３０は、データベース１４０からキーワード抽出部で抽出されたキーワードを含むカテゴリーで広告情報を選択してもよい。

データベース１４０は、広告主が登録した広告情報を格納することによって、広告情報をそれぞれのキーワード別に該当するカテゴリーに格納及び保持してもよい。ここで、広告情報は、広告の種類や態様に限定されずにモバイル端末に提供可能な全ての広告を意味してもよい。また、データベース１４０は、広告情報を広告主別に区分して保持及び管理してもよい。

一例として、広告選択部１３０は、テキスト情報に基づいて、コンテキスト分析によってユーザ間の通話中の単位時間の間で最も多く出現した単語をキーワードとして抽出し、抽出したキーワードを含むカテゴリーをデータベース１４０内で検索し、検索されたカテゴリーに該当する広告情報がユーザ端末に送信されるようにしてもよい。したがって、現在の対話で話題となっている内容に該当する広告が、ユーザに表示される可能性があるため、ユーザの購買行為につながり得る。

送信部１５０は、広告選択部１３０で選択された広告情報を該当するユーザ端末に送信する。ここで、送信部１５０は、広告情報をユーザ端末に送信する際に音声情報に関するテキスト情報を共に送信してもよい。

一方、送信部１５０は、音声情報とは別のパケットトンネル（ｐａｃｋｅｔ ｔｕｎｎｅｌ）を介して広告情報を送信してもよい。ここで、前記広告情報は、差出人のアプリケーション及び受信人のアプリケーションに送信されてもよい。

この場合、広告情報提供システム１００は、広告情報同期化部をさらに含み、差出人のアプリケーションから広告選択情報を受信すると、前記広告選択情報の受信に反応して選択された広告情報に該当するウェブページを受信人のアプリケーションに提供し、受信人のアプリケーションから広告選択情報を受信すると、前記広告選択情報の受信に反応して前記差出人のアプリケーションに前記選択された広告情報に該当するウェブページを提供してもよい。

例えば、差出人が広告情報提供システム１００から受信した広告情報をクリック、またはタッチなどによって選択を行えば、前記差出人の選択に反応して、差出人のユーザ端末に含まれるアプリケーションは、前記広告情報が選択されていることを示す広告選択情報を広告情報提供システム１００に送信する。

広告情報提供システム１００は、広告選択情報を受信すると、前記広告選択情報の受信に反応して、該当するウェブページを差出人のアプリケーションに提供し、前記アプリケーションで前記ウェブページが表示されるようにしてもよい。そして、前記広告情報提供システム１００は、受信人のアプリケーションにも前記ウェブページを提供し、受信人のアプリケーションでも該当するウェブページが表示されるようにしてユーザ間のアプリケーションにおいて広告情報が同期化されるようにすることによって、差出人及び受信人に同一の広告情報を表示するようにしてもよい。

これとは反対に、受信人が広告情報提供システム１００から受信した広告情報を選択した場合にも、差出人のアプリケーションでも該当するウェブページが表示されるようにして差出人及び受信人に同一の広告情報を表示するようにしてもよい。

したがって、音声通話時の各ユーザ達は、同一の広告情報に関するウェブページが表示され得るため、該当広告について普段通りに対話することができ、従ってより容易に購買行為につながり得るという効果がある。

図２は、本発明の他の実施形態において、広告情報提供システムを示すブロック図である。

図２によれば、広告情報提供システム２００は、ターゲット広告選択部２１０及びターゲット広告送信部２４０を含んでもよい。そして、広告情報提供システム２００は費用算出部２５０をさらに含んでもよい。ここで、ソーシャルデータベース２２０及び広告データベース２３０は、広告情報提供システム２００に含まれてもよく、或いは、広告情報提供システム２００とは別に、前記広告情報提供システム２００の外部に位置してもよい。

まず、広告情報提供システム２００は、映像通話を行おうとする通話者のユーザ端末にネットワークを介してターゲット広告を提供してもよい。このために、ユーザ端末には、映像通話サービスを提供するアプリケーション（Ａｐｐｌｉｃａｔｉｏｎ）が格納されてもよい。

ターゲット広告選択部２１０は、映像通話を行おうとする通話者のソーシャル情報（ｓｏｃｉａｌ ｉｎｆｏｒｍａｔｉｏｎ）を用いてターゲット広告を選択してもよい。

一例として、ユーザ端末のアプリケーションを介して映像通話を試みる場合、ターゲット広告選択部２１０は、映像通話をしようとする通話者に関するソーシャル情報をソーシャルデータベース２２０から取得してもよい。そして、ターゲット広告選択部２１０は、広告データベース２３０に格納された複数の広告の中から広告情報に該当する１つ以上のターゲット広告を選択してもよい。

ここで、ソーシャルデータベース２２０には、ソーシャルネットワークサービス（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋ Ｓｅｒｖｉｃｅ：ＳＮＳ）を介して通話者間に形成された社会的関係を示す情報に対応するソーシャル情報が格納されてもよい。

ここで、ソーシャル情報は、社会的関係を形成したユーザ達のためのユーザ情報及び関係情報のうち少なくとも１つを含んでもよい。例えば、ユーザ情報は、ユーザの地域情報、性別情報、年齢情報、職業情報、学歴情報、関心分野情報のうち少なくとも１つを含んでもよい。そして、関係情報は、社会的関係を形成したユーザ達の間の関係を分類する情報に対応しており、ユーザ間の関係が職場の同僚であるか、学校の友人であるか、家族であるか、または隣人であるか否かに関する情報などを含んでもよい。

ここで、ソーシャルデータベース２２０に通話者に関する関係情報が格納されなかった場合、ターゲット広告選択部２１０は、通話者に関するユーザ情報に基づいて通話者間の関係を推測して関係情報を生成してもよい。例えば、ターゲット広告選択部２１０は、通話者のユーザ情報に含まれる年齢情報及び職業情報などを用いて通話者間の関係が職場の同僚であるか否かを推測してもよい。そして、ターゲット広告選択部２１０は、推測された通話者間の関係に基づいて関係情報を生成してもよい。次に、ターゲット広告選択部２１０は、広告データベース２３０に格納された複数の広告の中から関係情報に該当するターゲット広告を選択してもよい。

ここで、広告データベース２３０には、広告主が申請した広告がカテゴリー別に分類して格納されてもよい。例えば、広告は、広告地域、広告主題、ターゲット性別などに分類して広告データベース２３０に格納されてもよい。これにより、ターゲット広告選択部２１０は、カテゴリー別に分類された広告の中から通話者のソーシャル情報に該当するターゲット広告を１つ以上選択してもよい。このように、ターゲット広告選択部２１０は、ソーシャル情報を用いてターゲット広告を選択することによって、複数の広告の中から映像通話中の通話者全員が関心を有するターゲット広告を選択してもよい。

ここで、複数のターゲット広告が選択された場合、ターゲット広告選択部２１０は、ソーシャル情報と選択されたターゲット広告間の関連度に基づいて複数のターゲット広告を関連度の高い順に整列してもよい。

ターゲット広告送信部２４０は、ターゲット広告選択部２１０で選択されたターゲット広告を通話者間に同期化してユーザ端末に送信してもよい。

一例として、ターゲット広告送信部２４０は、通話者１のユーザ端末１（２６０）及び通話者２のユーザ端末２（２７０）の各々に同一のターゲット広告が表示されるようにターゲット広告を同期化してユーザ端末１（２６０）及びユーザ端末２（２７０）に送信してもよい。これにより、ユーザ端末１（２６０）及びユーザ端末２（２７０）には、同一の時点で同一のターゲット広告を表示することができる。そして、通話者は互いに関心のある同一のターゲット広告を見ながら対話をすることができる。ここで、通話者が製品購買、贈り物、旅行、グルメ店などに対する対話を行っている場合、ターゲット広告を用いて通話者の製品購買または売り場への訪問などを誘導することができる。

他の例として、ターゲット広告選択部２１０で複数のターゲット広告が選択された場合、ターゲット広告送信部２４０は、整列したターゲット広告の順序で同期化してユーザ端末に送信してもよい。例えば、ターゲット広告１、ターゲット広告２、ターゲット広告３の順序で整列した場合、ターゲット広告送信部２４０は、ターゲット広告１がユーザ端末１（２６０）及びユーザ端末２（２７０）に同一の時点に表示し、続いてターゲット広告２がユーザ端末１（２６０）及びユーザ端末２（２７０）に同一の時点に表示し、そしてターゲット広告３がユーザ端末１（２６０）及びユーザ端末２（２７０）に同一の時点に表示するように、複数のターゲット広告を通話者間に同期化して送信してもよい。ここで、ターゲット広告送信部２４０は、複数のターゲット広告を映像通話が終了する時点まで同期化してリアルタイムで送信してもよい。

そして、ターゲット広告送信部２４０は、広告選択情報の受信に基づいて通話者が選択したターゲット広告に該当するウェブページをユーザ端末に送信してもよい。例えば、ユーザ端末にターゲット広告がバナー（ｂａｎｎｅｒ）形式で表示して、通話者がマウス、キーボード、指などのオブジェクトを用いてターゲット広告を選択することによってユーザ端末から広告選択情報が受信された場合、ターゲット広告送信部２４０は、選択されたターゲット広告に該当するウェブページをユーザ端末に送信してもよい。

一例として、通話者１がターゲット広告を選択した場合、ターゲット広告送信部２４０は、通話者１が選択したターゲット広告に該当するウェブページを通話者１のユーザ端末２６０及び通話者２のユーザ端末２７０に全て送信してもよい。これにより、通話者のうちのある１人がターゲット広告を選択しても、ターゲット広告送信部２４０は、選択されたターゲット広告に該当するウェブページを全ての通話者に送信することによって、通話者がターゲット広告について対話できるように誘導してもよい。

他の例として、ターゲット広告送信部２４０は、通話者のうちターゲット広告を選択した通話者にだけ前記選択されたターゲット広告に該当するウェブページを送信してもよい。

また他の例として、ターゲット広告送信部２４０は、通話者のうち映像通話時に広告視聴オプションを選択した通話者にだけ前記選択されたターゲット広告に該当するウェブページを送信してもよい。

そして、ターゲット広告送信部２４０は、同期化されたターゲット広告と共に表示制御情報をユーザ端末に送信してもよい。ここで、表示制御情報は、映像通話中の通話者間の映像情報とターゲット情報の表示位置を制御するための情報である。ここで、表示制御情報を用いて映像情報及びターゲット広告の表示位置を制御する具体的な説明は、図５〜図７を参照しながら後述することにする。

費用算出部２５０は、通話者がターゲット広告をオブジェクトを用いて選択したか否かに基づいて映像通話費用を算出してもよい。

例えば、映像通話中に通話者がターゲット広告をオブジェクトを用いて選択する場合、前記オブジェクトの選択に応じて、費用算出部２５０は選択されたターゲット広告の個数に基づいて映像通話費用を減額してもよい。

ここまで図２では、通話者間のソーシャル情報を用いて通話者全員が関心のある主題、分野などの共通事項に関するターゲット広告を選択するものとして説明したが、それ以外に、広告情報提供システム２００は通話者間の映像通話に基づいてターゲット広告を選択してもよい。

一例として、ターゲット広告選択部２１０は、ソーシャル情報と共に通話者の映像通話背景情報、音声情報、通話時間情報を用いて広告データベース２３０に格納された複数の広告の中からターゲット広告を選択してもよい。例えば、ユーザ端末を介して通話者が映像通話をしようとする場合、ユーザ端末に格納されたアプリケーションは、通話者の音声をデジタル化して音声情報を生成し、生成された音声情報を広告情報提供システム２００に送信してもよい。

これにより、ターゲット広告選択部２１０は、ユーザ端末から受信した音声情報からキーワードを抽出し、広告データベース２３０に格納された複数の広告の中から抽出したキーワード及びソーシャル情報に該当するターゲット広告を選択してもよい。

また、ユーザ端末に格納されたアプリケーションは、通話者の映像から背景を抽出して映像通話背景情報を生成し、映像通話背景情報を広告情報提供システム２００に送信してもよい。これにより、ターゲット広告選択部２１０は、受信した映像通話背景情報に該当するキーワードを決定し、決定したキーワード及びソーシャル情報に該当するターゲット広告を選択してもよい。例えば、通話者の映像通話背景がエッフェル塔である場合、ターゲット広告選択部２１０は、映像通話背景情報に該当するキーワードをエッフェル塔と決定してもよい。そして、ターゲット広告選択部２１０は、エッフェル塔及びソーシャル情報に該当するターゲット広告を選択してもよい。

また、ユーザ端末に格納されたアプリケーションは、通話者が映像通話を進行する時間に基づいて通話時間情報を生成し、通話時間情報を広告情報提供システム２００に送信してもよい。これにより、ターゲット広告選択部２１０は、通話時間情報及びソーシャル情報に該当するターゲット広告を選択してもよい。例えば、映像通話時間が夜で、通話者間の関係が家族である場合、ターゲット広告選択部２１０は、ソーシャル情報及び通話時間情報に基づいて夜食の広告をターゲット広告として選択してもよい。

このように、ターゲット広告選択部２１０は、映像通話背景情報及びソーシャル情報を共に利用したり、音声情報及びソーシャル情報を共に利用したり、通話時間情報及びソーシャル情報を共に用いてターゲット広告を選択することによって、通話者全員にとってより関心のある主題または分野に関する広告をターゲット広告として提供してもよい。

以下、図３を参照しながら本発明の一実施形態に係る広告情報提供装置を説明する。広告情報提供装置３００はユーザ端末に含まれており、ユーザがＶｏＩＰ基盤の音声通話を行う時の広告情報提供システムから受信した広告情報をユーザに提供してもよい。

広告情報提供装置３００は、音声認識モジュール３１０、情報変換モジュール３２０、送信モジュール３３０及び表示モジュール３４０を含む。

音声認識モジュール３１０は、アプリケーションを介して受信した音声情報を認識する。

情報変換モジュール３２０は、音声認識モジュール３１０で認識された音声情報をテキスト情報に変換する。ここで、情報変換モジュール３２０で変換されたテキスト情報は、送信モジュール３３０に送信されて広告情報提供システムでテキスト情報に該当する広告情報を受信するための用途に用いられる一方、ユーザ端末に字幕の形態で表示されるようにしてもよい。

送信モジュール３３０は、情報変換モジュール３２０で変換されたテキスト情報を広告情報提供システムに送信する。

広告情報提供システムは、広告情報提供装置３００からテキスト情報を受信すると、上述したようにデータベースでユーザ間の対話内容に適合した広告情報を選択して差出人及び受信人の広告情報提供装置３００に送信してもよい。

ここでも、前記広告情報提供システムは、音声情報とは別のパケットトンネルを介して広告情報を差出人のアプリケーション及び受信人のアプリケーションに送信してもよい。

表示モジュール３４０は、広告情報提供システムから受信した前記テキスト情報に該当する広告情報を表示する。ここで、表示モジュール３４０は、広告情報提供システムから受信した広告情報と情報変換モジュール３２０で変換されたテキスト情報をユーザ端末上の画面に表示してもよい。

その後、ユーザが表示された広告情報を選択する場合、広告情報提供システムは選択された広告情報に該当するウェブページを提供し、前記ウェブページに関する情報を前記ユーザと該ユーザと通話中の他のユーザのそれぞれのアプリケーションに送信して、ユーザ間に提供される広告情報を同期化してもよい。

図４は、本発明の一実施形態において、ユーザ端末上に広告情報及びテキスト情報が表示されることを示す例示図である。

図面を参照すれば、ユーザ端末の画面は、第１領域４１０及び第２領域４２０に区分してもよい。例えば、ユーザが通話を実行すれば、前記通話に反応して、ユーザ端末にはユーザ間の通話内容に適合した広告情報が広告情報提供システムから受信され、前記第１領域４１０または前記第２領域４２０に表示される。

広告情報が第１領域４１０に表示される場合、音声情報から変換されたテキスト情報は第２領域４２０に表示されてもよく、広告情報が第２領域４２０に表示される場合には前記テキスト情報は第１領域４１０に表示されてもよい。しかし、添付する図面は一実施形態であって、本発明はこれらに限定されることはなく、広告情報及びテキスト情報を複数の領域を介して画面上に表示することは、本発明の技術的思想の範疇に含まれるものといえる。

図５は、本発明の一実施形態において、広告情報提供システムで表示制御情報を用いてターゲット広告を表示する例を示す図である。

図５によれば、広告情報提供システムは、ユーザ端末の全体画面にターゲット広告が表示されるように制御するための表示制御情報をユーザ端末に送信してもよい。

例えば、ユーザ端末には、映像通話中の通話相手に関する映像情報５１０とバナー形式のターゲット広告５２０が表示されていてもよい。ここで、通話者によってターゲット広告５２０が選択された場合、前記選択に反応して、広告情報提供システムは、前記表示制御情報とターゲット広告５２０に該当するウェブページをユーザ端末に送信してもよい。これにより、ユーザ端末に格納されたアプリケーションは、前記表示制御情報に基づいて前記映像情報５１０の代わりにターゲット広告５３０をユーザ端末の全体画面に表示してもよい。換言すれば、ターゲット広告が選択される以前のユーザ端末には映像情報５１０が表示され、ターゲット広告が選択された以後のユーザ端末にはターゲット広告５３０が表示されてもよい。ここで、ユーザ端末のスピーカを介して通話相手の音声は出力されてもよい。

図６は、本発明の一実施形態において、広告情報提供システムで表示制御情報を用いてターゲット広告と映像情報とを共に表示する例を示す図である。

図６によれば、広告情報提供システムは、ユーザ端末の画面分割によってターゲット広告及び映像情報が共に表示されるように制御するための表示制御情報をユーザ端末に送信してもよい。

例えば、ユーザ端末には、映像通話中の通話相手に対する映像情報６１０とバナー形式のターゲット広告６２０とが表示されてもよい。ここで、通話者によってターゲット広告６２０が選択された場合、広告情報提供システムは表示制御情報とターゲット広告６２０に該当するウェブページをユーザ端末に送信してもよい。これにより、ユーザ端末に格納されたアプリケーションは、表示制御情報によって画面を分割し、分割された画面に映像情報６３０及び前記ターゲット広告６２０に該当するウェブページ６４０を表示してもよい。ここで、画面は上下、左右に分割されてもよく、映像情報６３０及びターゲット広告６２０に該当するウェブページ６３０は分割された画面のうちのどこに表示されてもよい。

図７は、本発明の一実施形態において、広告情報提供システムで表示制御情報を用いてターゲット広告と映像情報とをオーバラップして表示する例を示す図である。

図７によれば、広告情報提供システムは、ターゲット広告が映像情報にオーバラップ（ｏｖｅｒｌａｐ）して表示されるように制御するための表示制御情報をユーザ端末に送信してもよい。

例えば、ユーザ端末には映像通話中の通話相手に対する映像情報７１０とバナー形式のターゲット広告７２０が表示してもよい。ここで、通話者によってターゲット広告７２０が選択された場合、広告情報提供システムは表示制御情報と前記ターゲット広告７２０に該当するウェブページをユーザ端末に送信してもよい。これにより、ユーザ端末に格納されたアプリケーションは、表示制御情報に基づいて全体画面に表示されている映像情報７３０の上にターゲット広告７２０に該当するウェブページ７４０をオーバラップ（ｏｖｅｒｌａｐ）して表示してもよい。

以上の図５〜図７では、説明の便宜のためにターゲット広告がバナー形式でユーザ端末に表示するものとして説明したが、これらは一例であって、広告情報提供システムはバナー形式以外の他の形態によってターゲット広告をユーザ端末に表示することもできる。

図８は、本発明の一実施形態において、広告情報提供システムが広告情報を提供する方法を説明するためのフローチャートである。以下、図面を参照しながら広告情報提供システムが広告情報をユーザに提供する過程を詳細に説明する。

広告情報提供システムの音声認識部は、ユーザ端末のアプリケーションから受信した音声情報を認識する（Ｓ８１０）。これにより、情報変換部は音声認識部から受信した音声情報をテキスト情報に変換する（Ｓ８２０）。ここで、情報変換部は前記音声情報をテキスト情報へ変換する際にコンテキスト分析によってユーザ間の通話内容からキーワードを抽出してもよい。

この後、広告選択部は、データベースに格納された複数の広告情報のうち前記テキスト情報から抽出されたキーワードに基づいてユーザ間の話題に適合した広告情報を選択する（Ｓ８３０）。

送信部は、広告選択部で選択された広告情報をユーザ端末に送信する（Ｓ８４０）。ここで、送信部は、音声情報を送信するパケットトンネルとは別のパケットトンネルを介して、前記広告情報と共にテキスト情報を差出人のアプリケーション及び受信人のアプリケーションに送信してもよい。

このようにユーザ端末に送信された広告情報は、差出人及び受信人のユーザ端末の画面上に表示される。ここで、差出人が広告情報を選択する場合、選択された広告情報に該当するウェブページが差出人に提供される一方で受信人に提供されてもよい。また、受信人が広告情報を選択する場合にも、前記ウェブページが受信人と差出人に提供されてもよい。

図９は、本発明の他の実施形態において、広告情報提供システムが広告情報を提供する方法を説明するためのフローチャートである。

まず、ソーシャルネットワークサービス（ＳＮＳ）を介して社会的関係（ｓｏｃｉａｌ ｒｅｌａｔｉｏｎｓｈｉｐ）を形成した通話者が映像通話をしようとする場合、広告情報提供システムは通話者に関するソーシャル情報（ｓｏｃｉａｌ ｉｎｆｏｒｍａｔｉｏｎ）に基づいてターゲット広告を選択してもよい（Ｓ９１０）。

ここで、広告情報提供システムは、ソーシャルデータベースに格納されたソーシャル情報の中から通話者に関するソーシャル情報を取得してもよい。そして、広告情報提供システムは、広告データベースに格納された複数の広告の中からソーシャル情報に該当するターゲット広告を選択してもよい。

また、広告情報提供システムは、ソーシャル情報と共に通話者の映像通話背景情報、音声情報、または、通話時間情報を用いて広告データベースに格納された複数の広告の中からターゲット広告を選択してもよい。

一例として、ユーザ端末を介して通話者が映像通話をしようとする場合、ユーザ端末に格納されたアプリケーションは、通話者の音声をデジタル化して音声情報を生成し、生成された音声情報を広告情報提供システムに送信してもよい。これにより、広告情報提供システムは、ユーザ端末から受信した音声情報からキーワードを抽出し、広告データベースに格納された複数の広告の中から抽出したキーワード及びソーシャル情報に該当するターゲット広告を選択してもよい。

他の例として、ユーザ端末に格納されたアプリケーションは、通話者の映像から背景を抽出して映像通話背景情報を生成し、前記映像通話背景情報を広告情報提供システムに送信してもよい。これにより、広告情報提供システムは、映像通話背景情報に該当するキーワードを決定し、決定したキーワード及びソーシャル情報に該当するターゲット広告を選択してもよい。

また他の例として、ユーザ端末に格納されたアプリケーションは、通話者が映像通話を実行する時間に基づいて通話時間情報を生成し、通話時間情報を広告情報提供システムに送信してもよい。これにより、広告情報提供システムは、通話時間情報及びソーシャル情報に該当するターゲット広告を選択してもよい。このように、広告情報提供システムは、映像通話背景情報、音声情報、または、映像情報と共にソーシャル情報を用いてターゲット広告を選択することによって、通話者全員がより関心のある話題または主題に関する広告をターゲット広告として提供してもよい。

次に、広告情報提供システムは、選択したターゲット広告を通話者間に同期化してユーザ端末に送信してもよい（Ｓ９２０）。

一例として、広告情報提供システムは、選択されたターゲット広告が通話者の各ユーザ端末に同一の時点で表示されるように同期化して送信してもよい。ここで、複数のターゲット広告が選択された場合、広告情報提供システムはソーシャル情報とターゲット広告との間の関連度に応じて複数のターゲット広告を配列してもよい。そして、前記広告情報提供システムは、配列した複数のターゲット広告を通話者間で同期化して送信してもよい。これにより、通話者１のユーザ端末１と通話者２のユーザ端末２には、同一の時点でターゲット広告１が表示され、続いて通話者１のユーザ端末１と通話者２のユーザ端末２には、同一の時点でターゲット広告２が表示され、通話者１のユーザ端末１と通話者２のユーザ端末２には、同一の時点でターゲット広告３が整列した順序で順次表示されてもよい。

そして、ユーザ端末から広告選択情報が受信された場合（Ｓ９３０）、広告情報提供システムは、選択されたターゲット広告に該当するウェブページをユーザ端末に送信してもよい（Ｓ９４０）。

一例として、通話者１がターゲット広告を選択した場合、広告情報提供システムは、通話者１が選択したターゲット広告に該当するウェブページを通話者１のユーザ端末及び通話者２のユーザ端末の双方に送信してもよい。これにより、通話者のうちのある１人がターゲット広告を選択しても、広告情報提供システムは選択されたターゲット広告に該当するウェブページを全ての通話者に送信することによって通話者が前記選択されたターゲット広告について対話するように誘導してもよい。

他の例として、広告情報提供システムは、通話者のうちターゲット広告を選択した通話者にだけ前記選択されたターゲット広告に該当するウェブページを送信してもよい。

また他の例として、広告情報提供システムは、通話者のうち映像通話時に広告視聴オプションを選択した通話者にだけ前記選択されたターゲット広告に該当するウェブページを送信してもよい。

ここで、広告情報提供システムは、ターゲット広告に関するウェブページと共に表示制御情報をユーザ端末に送信してもよい。ここで、表示制御情報は、映像通話中の通話者に関する映像情報とターゲット情報とをユーザ端末に表示する状態を制御するための情報である。

一例として、ユーザ端末に格納されたアプリケーションは、表示制御情報に基づいてユーザ端末の画面を分割し、分割された画面に映像情報とターゲット情報に該当するウェブページを各々表示してもよい。

他の例として、前記アプリケーションは、表示制御情報に基づいてユーザ端末の全体画面にターゲット広告に該当するウェブページを表示してもよい。このように、ユーザ端末に映像情報が表示されなくても通話に支障がないように、音声情報はユーザ端末のスピーカを介して出力されてもよい。

また他の例として、前記アプリケーションは、表示制御情報によってユーザ端末の全体画面に表示されている映像情報の上にターゲット広告に該当するウェブページをオーバラップ（ｏｖｅｒｌａｐ）して表示してもよい。

そして、広告情報提供システムは、ユーザ端末に表示したターゲット広告の選択有無に基づいて映像通話費用を算出してもよい。例えば、通話者が映像通話中にオブジェクトを用いてターゲット広告を選択した回数に基づいて映像通話費用を算出してもよい。即ち、通話者が映像通話中に表示される１つ以上のターゲット広告を見た回数によって映像通話費用を減額してもよい。

図１０は、本発明の一実施形態において、広告情報提供装置が広告情報を提供する方法を説明するためのフローチャートである。以下では、図３で説明した広告情報提供装置を介して広告情報が提供される過程を説明する。

ユーザが通話を行ってユーザ端末に音声が入力されれば、前記音声入力に反応して、広告情報提供装置の音声認識モジュールは、アプリケーションを介して受信した音声情報を認識する（Ｓ１０１０）。これにより、情報変換モジュールは、音声認識モジュールで認識された音声情報をテキスト情報に変換する（Ｓ１０２０）。ここで、テキスト情報は、送信モジュールに送信されて広告情報提供システムに送信されてもよく（Ｓ１０３０）、表示モジュールに送信されてユーザ端末の画面上に表示されてもよい。

広告情報提供システムからテキスト情報に該当する広告情報を受信すると、表示モジュールは、前記広告情報を前記広告情報が提供される領域とは異なる領域上に表示してもよい（Ｓ１０４０）。

本発明の実施形態に係る方法は、多様なコンピュータ手段によって行うことができるプログラム命令形態で実現され、コンピュータ読み出し可能媒体に記録してもよい。前記記録媒体は、プログラム命令、データファイル、データ構造などを単独または組み合わせたものを含んでもよい。前記記録媒体及びプログラム命令は、本発明の目的のために特別に設計して構成されたものでもよく、コンピュータソフトウェア分野の技術を有する当業者にとって公知のものであり使用可能なものであってもよい。

上述したように本発明を限定された実施形態と図面によって説明したが、本発明は、上記の実施形態に限定されることなく、本発明が属する分野における通常の知識を有する者であれば、このような実施形態から多様な修正及び変形が可能である。

したがって、本発明の範囲は、開示された実施形態に限定されて定められるものではなく、特許請求の範囲及び特許請求の範囲と均等なものなどによって定められるものである。

１００ 広告情報提供システム
１１０ 音声認識部
１２０ 情報変換部
１３０ 広告選択部
１４０ データベース
１５０ 送信部

Claims (6)

1. 映像通話を行おうとする通話者のソーシャル情報を用いてターゲット広告を選択するターゲット広告選択部と、
   前記ターゲット広告をユーザ端末に送信するターゲット広告送信部と、を含み、
   前記ターゲット広告選択部は、
   前記通話者の地域情報、性別情報、年齢情報、職業情報、学歴情報、関心分野情報のうち少なくとも１つを含むユーザ情報を用いて前記通話者間の関係情報を生成し、広告主が申請した１つ以上の広告が格納された広告データベースから前記関係情報から導かれる前記通話者間に共通するテーマに対応するターゲット広告を選択し、
   前記選択されたターゲット広告が前記通話者のユーザ端末に表示されるように、前記選択されたターゲット広告を通話者間に同期化して送信し、
   前記通話者のうちのいずれか一人によって前記ターゲット広告が選択された場合、前記選択されたターゲット広告に関するウェブサイトのＵＲＬを前記ターゲット広告を選択した通話者及び通話相手に送信することを特徴とする広告情報提供システム。
2. 前記ターゲット広告送信部は、
   前記ユーザ端末の画面分割によって、前記ターゲット広告及び前記映像通話中の通話相手に対する映像情報が共に表示されるように制御する表示制御情報、前記ユーザ端末の全体画面に前記ターゲット広告が表示されるように制御する表示制御情報、及び前記ユーザ端末の全体画面に映像通話中の通話相手に関する映像情報を表示し、表示した映像情報の上に前記ターゲット広告がオーバラップして表示されるように制御する表示制御情報、のうち少なくとも１つを送信することを特徴とする請求項１に記載の広告情報提供システム。
3. 前記ターゲット広告選択部は、さらに、
   前記通話者の音声情報を用いて抽出したキーワードのうち少なくとも１つに基づいて前記ターゲット広告を選択することを特徴とする請求項１に記載の広告情報提供システム。
4. 前記通話者のうち少なくとも１人が前記ターゲット広告を選択したか否かに基づいて前記通話者間の映像通話費用を算出する費用算出部をさらに含む請求項１に記載の広告情報提供システム。
5. 広告主が申請した１つ以上の広告が格納された広告データベースと、
   前記ソーシャル情報が格納されたソーシャルデータベースと、
   を含み、
   前記ターゲット広告選択部は、
   前記通話者が映像通話を試みることによって、前記ソーシャルデータベースから前記通話者に対するソーシャル情報を取得することを特徴とする請求項１に記載の広告情報提供システム。
6. 映像通話を行おうとする通話者のソーシャル情報を用いてターゲット広告を選択し、
   前記選択されたターゲット広告が前記通話者のユーザ端末に表示するように前記選択されたターゲット広告を通話者間に同期化して送信することを含み、
   前記ターゲット広告の選択は、
   前記通話者の地域情報、性別情報、年齢情報、職業情報、学歴情報、関心分野情報のうち少なくとも１つを含むユーザ情報を用いて前記通話者間の関係情報を生成し、広告主が申請した１つ以上の広告が格納された広告データベースから前記関係情報から導かれる前記通話者間に共通するテーマに対応するターゲット広告を選択し、
   前記通話者のうちのいずれか一人によって前記ターゲット広告が選択された場合、前記選択されたターゲット広告に関するウェブサイトのＵＲＬをターゲット広告を選択した通話者及び通話相手に送信することを特徴とすることを特徴とする広告情報提供方法。

Images