JP2021177625A - インターネット電話に基づく通話中にリアクションを表示する方法、システム、およびコンピュータプログラム - Google Patents

Abstract

【課題】 インターネット電話に基づく通話中にリアクションを表示する方法、システム、およびコンピュータプログラムを提供する。【解決手段】ソーシャルグラフ（ｓｏｃｉａｌ ｇｒａｐｈ）を利用したＶｏＩＰ（ｖｏｉｃｅ ｏｖｅｒ ｉｎｔｅｒｎｅｔ ｐｒｏｔｏｃｏｌ）通話中に通話参加者が多様なメディアコンテンツを共有することができ、ＶｏＩＰ通話中にメディアコンテンツを共有する環境において通話参加者がやり取りしたリアクション（ｒｅａｃｔｉｏｎ）をリアルタイムで表示することができる。【選択図】図４

Description

以下の説明は、インターネット電話（ＶｏＩＰ）に基づいて通話機能を提供する技術に関する。

近年、通信デバイスは、音声通話サービスや文字サービスはもちろん、無線インターネットサービスや地上波／衛星放送サービスなどの多様なサービスを提供している。

特に、画像の圧縮および復元技術の発展とカメラが備わったデバイスの常用化により、相手の顔を確認しながら通話することを可能にしたビデオ通話サービスが提供されている。

ビデオ通話サービスを提供する技術の一例として、特許文献１（登録日２００３年９月２９日）には、無線環境の移動電話網で移動電話端末機にビデオ電話サービスを提供する技術が開示されている。

韓国登録特許第１０−０４０１２６２号公報

ソーシャルグラフ（ｓｏｃｉａｌ ｇｒａｐｈ）を利用したＶｏＩＰ（ｖｏｉｃｅ ｏｖｅｒ ｉｎｔｅｒｎｅｔ ｐｒｏｔｏｃｏｌ）通話中に通話参加者が多様なメディアコンテンツを共有できるようにすることを目的とする。

ＶｏＩＰ通話中に通話参加者がやり取りしたリアクション（ｒｅａｃｔｉｏｎ）をリアルタイムで表示できるようにすることを目的とする。

コンピュータ装置が実行するリアクション表示方法であって、前記コンピュータ装置は、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、前記リアクション表示方法は、前記少なくとも１つのプロセッサが、前記コンピュータ装置のユーザが参加するＶｏＩＰ通話中にメディアコンテンツを共有する場合、ＶｏＩＰ通話画面とともにコンテンツ共有画面を表示する段階、前記少なくとも１つのプロセッサが、前記ＶｏＩＰ通話中に前記コンピュータ装置のユーザからリアクション（ｒｅａｃｔｉｏｎ）が入力された位置情報を受信する段階、前記少なくとも１つのプロセッサが、前記ＶｏＩＰ通話に参加している少なくとも１人の他のユーザを対象にして前記リアクションに関する情報と前記位置情報を送信する段階、および前記少なくとも１つのプロセッサが、前記位置情報に基づき、前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上に前記リアクションを表示する段階を含む、リアクション表示方法を提供する。

一側面によると、前記受信する段階は、前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上の位置情報として前記リアクションが入力された位置座標を認識する段階を含んでよい。

他の側面によると、前記受信する段階は、前記コンテンツ共有画面に対して入力されたリアクションの場合、前記コンピュータ装置のユーザがリアクションを入力した時点に前記コンテンツ共有画面上で再生中のコンテンツの再生位置（ｐｌａｙｂａｃｋ ｐｏｓｉｔｉｏｎ）を前記位置情報として認識する段階を含んでよい。

また他の側面によると、前記リアクション表示方法は、前記少なくとも１つのプロセッサが、前記位置情報に基づき、前記ＶｏＩＰ通話画面に含まれる参加者画像と前記コンテンツ共有画面のうちからリアクション対象を特定する段階をさらに含んでよい。

また他の側面によると、前記特定する段階は、前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうち、前記リアクションが入力された位置座標に対応する画面を前記リアクション対象として特定してよい。

また他の側面によると、前記特定する段階は、前記コンテンツ共有画面上で再生中のコンテンツの再生位置が前記位置情報として受信された場合、前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうちの前記コンテンツ共有画面を前記リアクション対象として特定してよい。

また他の側面によると、前記送信する段階は、前記ＶｏＩＰ通話に参加している他のユーザのうちから前記リアクション対象に対応するユーザを特定し、前記特定されたユーザを対象にして前記リアクションに関する情報と前記位置情報を送信してよい。

また他の側面によると、前記送信する段階は、前記リアクションに関する情報と前記位置情報を含むＶｏＩＰ通話パケットのメタデータを生成して送信し、前記他のユーザのコンピュータ装置では、前記メタデータに基づいて前記他のユーザのコンピュータ装置の画面上に前記リアクションが表示されてよい。

また他の側面によると、前記表示する段階は、前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうちの前記位置情報に対応する画面上の位置に前記リアクションとマッチングするオブジェクトを表示してよい。

また他の側面によると、前記リアクション表示方法は、前記少なくとも１つのプロセッサが、前記ＶｏＩＰ通話中に共有する前記メディアコンテンツに関する情報と前記ＶｏＩＰ通話中に受信した前記リアクションに関する情報を前記ＶｏＩＰ通話と関連するチャットルームに送信する段階をさらに含んでよい。

さらに他の側面によると、前記ＶｏＩＰ通話と関連するチャットルームに送信する段階は、前記メディアコンテンツに関する情報と前記リアクションに関する情報を前記チャットルームに含まれるメッセージタイプで管理する段階を含んでよい。

前記リアクション表示方法を前記コンピュータシステムに実行させるために非一時的なコンピュータ読み取り可能な記録媒体に記録される、コンピュータプログラムを提供する。

コンピュータ装置であって、メモリに含まれるコンピュータ読み取り可能な命令を実行するように実現される少なくとも１つのプロセッサを含み、前記少なくとも１つのプロセッサは、前記コンピュータ装置のユーザが参加するＶｏＩＰ通話中にメディアコンテンツを共有する場合、ＶｏＩＰ通話画面とともにコンテンツ共有画面を表示する過程、前記ＶｏＩＰ通話中に前記コンピュータ装置のユーザからリアクションが入力された位置情報を受信する過程、前記ＶｏＩＰ通話に参加している少なくとも１人の他のユーザを対象にして前記リアクションに関する情報と前記位置情報を送信する過程、および前記位置情報に基づき、前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上に前記リアクションを表示する過程を処理する、コンピュータ装置を提供する。

本発明の一実施形態における、ネットワーク環境の例を示した図である。 本発明の一実施形態における、電子機器およびサーバの内部構成を説明するためのブロック図である。 本発明の一実施形態における、電子機器のプロセッサが含むことのできる構成要素の例を示した図である。 本発明の一実施形態における、電子機器が実行することのできる方法の例を示したフローチャートである。 本発明の一実施形態における、ＶｏＩＰ通話中にコンテンツを共有する過程を説明するための例示図である。 本発明の一実施形態における、ＶｏＩＰ通話中にコンテンツを共有する過程を説明するための例示図である。 本発明の一実施形態における、ＶｏＩＰ通話中にコンテンツを共有する過程を説明するための例示図である。 本発明の一実施形態における、ＶｏＩＰ通話中にコンテンツを共有する過程を説明するための例示図である。 本発明の一実施形態における、ＶｏＩＰ通話中にリアクションを表示する方法の例を示したフローチャートである。 本発明の一実施形態における、ＶｏＩＰ通話中にリアクションを表示する過程を説明するための例示図である。 本発明の一実施形態における、ＶｏＩＰ通話中にリアクションを表示する過程を説明するための例示図である。 本発明の一実施形態における、ＶｏＩＰ通話中にリアクションを表示する過程を説明するための例示図である。

以下、本発明の実施形態について、添付の図面を参照しながら詳しく説明する。

本発明の実施形態は、ＶｏＩＰ（ｖｏｉｃｅ ｏｖｅｒ ｉｎｔｅｒｎｅｔ ｐｒｏｔｏｃｏｌ）に基づく通話機能を提供する技術に関する。

本明細書で具体的に開示される事項を含む実施形態によると、ソーシャルグラフを利用したＶｏＩＰ通話中に通話参加者が多様なメディアコンテンツを共有することができ、ＶｏＩＰ通話中に通話参加者がやり取りしたリアクション（ｒｅａｃｔｉｏｎ）をリアルタイムで表示することができる。

図１は、本発明の一実施形態における、ネットワーク環境の例を示した図である。図１のネットワーク環境は、複数の電子機器１１０、１２０、１３０、１４０、複数のサーバ１５０、１６０、およびネットワーク１７０を含む例を示している。このような図１は、発明の説明のための一例に過ぎず、電子機器の数やサーバの数が図１のように限定されることはない。

複数の電子機器１１０、１２０、１３０、１４０は、コンピュータ装置によって実現される固定端末や移動端末であってよい。複数の電子機器１１０、１２０、１３０、１４０の例としては、スマートフォン、携帯電話、ナビゲーション、ＰＣ（ｐｅｒｓｏｎａｌ ｃｏｍｐｕｔｅｒ）、ノート型ＰＣ、デジタル放送用端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｍｅｄｉａ Ｐｌａｙｅｒ）、タブレット、ゲームコンソール、ウェアラブルデバイス、ＩｏＴ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ）デバイス、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）デバイス、ＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）デバイスなどがある。一例として、図１では、電子機器１１０の例としてスマートフォンを示しているが、本発明の実施形態において、電子機器１１０は、実質的に無線または有線通信方式を利用し、ネットワーク１７０を介して他の電子機器１２０、１３０、１４０および／またはサーバ１５０、１６０と通信することのできる多様な物理的なコンピュータ装置のうちの１つを意味してよい。

通信方式が限定されることはなく、ネットワーク１７０が含むことのできる通信網（一例として、移動通信網、有線インターネット、無線インターネット、放送網、衛星網など）を利用する通信方式だけではなく、機器間の近距離無線通信が含まれてもよい。例えば、ネットワーク１７０は、ＰＡＮ（ｐｅｒｓｏｎａｌ ａｒｅａ ｎｅｔｗｏｒｋ）、ＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）、ＣＡＮ（ｃａｍｐｕｓ ａｒｅａ ｎｅｔｗｏｒｋ）、ＭＡＮ（ｍｅｔｒｏｐｏｌｉｔａｎ ａｒｅａ ｎｅｔｗｏｒｋ）、ＷＡＮ（ｗｉｄｅ ａｒｅａ ｎｅｔｗｏｒｋ）、ＢＢＮ（ｂｒｏａｄｂａｎｄ ｎｅｔｗｏｒｋ）、インターネットなどのネットワークのうちの１つ以上の任意のネットワークを含んでよい。さらに、ネットワーク１７０は、バスネットワーク、スターネットワーク、リングネットワーク、メッシュネットワーク、スター−バスネットワーク、ツリーまたは階層的ネットワークなどを含むネットワークトポロジのうちの任意の１つ以上を含んでもよいが、これらに限定されることはない。

サーバ１５０、１６０それぞれは、複数の電子機器１１０、１２０、１３０、１４０とネットワーク１７０を介して通信して命令、コード、ファイル、コンテンツ、サービスなどを提供する１つ以上のコンピュータ装置によって実現されてよい。例えば、サーバ１５０は、ネットワーク１７０を介して接続した複数の電子機器１１０、１２０、１３０、１４０に第１サービスを提供するシステムであってよく、サーバ１６０もネットワーク１７０を介して接続した複数の電子機器１１０、１２０、１３０、１４０に第２サービスを提供するシステムであってよい。より具体的な例として、サーバ１５０は、複数の電子機器１１０、１２０、１３０、１４０においてインストールされて実行されるコンピュータプログラムであるアプリケーションを通じ、該当のアプリケーションが目的とするサービス（一例として、ＶｏＩＰ通話サービスなど）を第１サービスとして複数の電子機器１１０、１２０、１３０、１４０に提供してよい。他の例として、サーバ１６０は、上述したアプリケーションのインストールおよび実行のためのファイルを複数の電子機器１１０、１２０、１３０、１４０に配布するサービスを第２サービスとして提供してよい。

図２は、本発明の一実施形態における、電子機器およびサーバの内部構成を説明するためのブロック図である。図２では、電子機器に対する例として電子機器１１０の内部構成およびサーバ１５０の内部構成について説明する。また、他の電子機器１２０、１３０、１４０やサーバ１６０も、上述した電子機器１１０またはサーバ１５０と同一または類似の内部構成を有してよい。

電子機器１１０およびサーバ１５０は、メモリ２１１、２２１、プロセッサ２１２、２２２、通信モジュール２１３、２２３、および入力／出力インタフェース２１４、２２４を含んでよい。メモリ２１１、２２１は、非一時的なコンピュータ読み取り可能な記録媒体であって、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、ＲＯＭ（ｒｅａｄ ｏｎｌｙ ｍｅｍｏｒｙ）、ディスクドライブ、ＳＳＤ（ｓｏｌｉｄ ｓｔａｔｅ ｄｒｉｖｅ）、フラッシュメモリ（ｆｌａｓｈ ｍｅｍｏｒｙ）などのような永続的大容量記録装置を含んでよい。ここで、ＲＯＭ、ＳＳＤ、フラッシュメモリ、ディスクドライブのような永続的大容量記録装置は、メモリ２１１、２２１とは区分される別の永続的記録装置として電子機器１１０やサーバ１５０に含まれてもよい。また、メモリ２１１、２２１には、オペレーティングシステムと、少なくとも１つのプログラムコード（一例として、電子機器１１０においてインストールされて実行されるブラウザや、特定のサービスの提供のために電子機器１１０にインストールされたアプリケーションなどのためのコード）が記録されてよい。このようなソフトウェア構成要素は、メモリ２１１、２２１とは別のコンピュータ読み取り可能な記録媒体からロードされてよい。このような別のコンピュータ読み取り可能な記録媒体は、フロッピー（登録商標）ドライブ、ディスク、テープ、ＤＶＤ／ＣＤ−ＲＯＭドライブ、メモリカードなどのコンピュータ読み取り可能な記録媒体を含んでよい。他の実施形態において、ソフトウェア構成要素は、コンピュータ読み取り可能な記録媒体ではない通信モジュール２１３、２２３を通じてメモリ２１１、２２１にロードされてもよい。例えば、少なくとも１つのプログラムは、開発者またはアプリケーションのインストールファイルを配布するファイル配布システム（一例として、上述したサーバ１６０）がネットワーク１７０を介して提供するファイルによってインストールされるコンピュータプログラム（一例として、上述したアプリケーション）に基づいてメモリ２１１、２２１にロードされてよい。

プロセッサ２１２、２２２は、基本的な算術、ロジック、および入出力演算を実行することにより、コンピュータプログラムの命令を処理するように構成されてよい。命令は、メモリ２１１、２２１または通信モジュール２１３、２２３によって、プロセッサ２１２、２２２に提供されてよい。例えば、プロセッサ２１２、２２２は、メモリ２１１、２２１のような記録装置に記録されたプログラムコードにしたがって受信される命令を実行するように構成されてよい。

通信モジュール２１３、２２３は、ネットワーク１７０を介して電子機器１１０とサーバ１５０とが互いに通信するための機能を提供してもよいし、電子機器１１０および／またはサーバ１５０が他の電子機器（一例として、電子機器１２０）または他のサーバ（一例として、サーバ１６０）と通信するための機能を提供してもよい。一例として、電子機器１１０のプロセッサ２１２がメモリ２１１のような記録装置に記録されたプログラムコードにしたがって生成した要求が、通信モジュール２１３の制御にしたがってネットワーク１７０を介してサーバ１５０に伝達されてよい。これとは逆に、サーバ１５０のプロセッサ２２２の制御にしたがって提供される制御信号や命令、コンテンツ、ファイルなどが、通信モジュール２２３とネットワーク１７０を経て電子機器１１０の通信モジュール２１３を通じて電子機器１１０に受信されてよい。例えば、通信モジュール２１３を通じて受信されたサーバ１５０の制御信号や命令、コンテンツ、ファイルなどは、プロセッサ２１２やメモリ２１１に伝達されてよく、コンテンツやファイルなどは、電子機器１１０がさらに含むことのできる記録媒体（上述した永続的記録装置）に記録されてよい。

入力／出力インタフェース２１４は、入力／出力装置２１５とのインタフェースのための手段であってよい。例えば、入力装置は、キーボード、マウス、マイクロフォン、カメラなどの装置を、出力装置は、ディスプレイ、スピーカ、触覚フィードバックデバイスなどのような装置を含んでよい。他の例として、入力／出力インタフェース２１４は、タッチスクリーンのように入力と出力のための機能が１つに統合された装置とのインタフェースのための手段であってもよい。入力／出力装置２１５は、電子機器１１０と１つの装置で構成されてもよい。また、サーバ１５０の入力／出力インタフェース２２４は、サーバ１５０に接続するかサーバ１５０が含むことのできる入力または出力のための装置（図示せず）とのインタフェースのための手段であってよい。より具体的な例として、電子機器１１０のプロセッサ２１２がメモリ２１１にロードされたコンピュータプログラムの命令を処理するにあたり、サーバ１５０や電子機器１２０が提供するデータを利用して構成されるサービス画面やコンテンツが、入力／出力インタフェース２１４を通じてディスプレイに表示されてよい。

また、他の実施形態において、電子機器１１０およびサーバ１５０は、図２の構成要素よりも多くの構成要素を含んでもよい。しかし、大部分の従来技術的構成要素を明確に図に示す必要はない。例えば、電子機器１１０は、上述した入力／出力装置２１５のうちの少なくとも一部を含むように実現されてもよいし、トランシーバ、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）モジュール、カメラ、各種センサ、データベースなどのような他の構成要素をさらに含んでもよい。より具体的な例として、電子機器１１０がスマートフォンである場合、一般的にスマートフォンが含んでいる加速度センサやジャイロセンサ、カメラモジュール、物理的な各種ボタン、タッチパネルを利用したボタン、入力／出力ポート、振動のための振動器などのような多様な構成要素が、電子機器１１０にさらに含まれるように実現されてよい。

以下では、インターネット電話（ＶｏＩＰ）に基づく通話中にコンテンツを共有する方法およびシステムの具体的な実施形態について説明する。

図３は、本発明の一実施形態における、電子機器のプロセッサが含むことのできる構成要素の例を示したブロック図であり、図４は、本発明の一実施形態における、電子機器が実行することのできる方法の例を示したフローチャートである。

本実施形態に係る電子機器１１０には、コンピュータによって実現されたＶｏＩＰ通話システムが構成されてよい。一例として、ＶｏＩＰ通話システムは、独立的に動作するプログラム形態で実現されてもよいし、特定のアプリケーション（例えば、メッセンジャー）のイン−アプリ（ｉｎ−ａｐｐ）形態で構成され、前記特定のアプリケーション上で動作が可能なように実現されてもよく、場合によっては、サーバ１５０との連動によってＶｏＩＰ通話サービスを提供してもよい。

電子機器１１０にインストールされたアプリケーションが提供する命令に基づき、電子機器１１０に実現されたＶｏＩＰ通話システムは、図４に示したコンテンツ共有方法を実行してよい。

図４に係るコンテンツ共有方法を実行するために、電子機器１１０のプロセッサ２１２は、構成要素として、図３に示すように、通話提供部３１０、インタフェース提供部３２０、共有要請部３３０、コンテンツ表示部３４０、およびリアクション表示部３５０を含んでよい。実施形態によって、プロセッサ２１２の構成要素は、選択的にプロセッサ２１２に含まれても除外されてもよい。また、実施形態によって、プロセッサ２１２の構成要素は、プロセッサ２１２の機能の表現のために分離されても併合されてもよい。

このようなプロセッサ２１２およびプロセッサ２１２の構成要素は、図４のコンテンツ共有方法が含む段階４１０〜４５０を実行するように電子機器１１０を制御してよい。例えば、プロセッサ２１２およびプロセッサ２１２の構成要素は、メモリ２１１が含むオペレーティングシステムのコードと、少なくとも１つのプログラムのコードとによる命令（ｉｎｓｔｒｕｃｔｉｏｎ）を実行するように実現されてよい。

ここで、プロセッサ２１２の構成要素は、電子機器１１０に記録されたプログラムコードが提供する命令（一例として、電子機器１１０で実行されるアプリケーションが提供する命令）にしたがってプロセッサ２１２によって実行される、プロセッサ２１２の互いに異なる機能（ｄｉｆｆｅｒｅｎｔ ｆｕｎｃｔｉｏｎｓ）の表現であってよい。例えば、電子機器１１０がＶｏＩＰ通話を提供するように上述した命令にしたがって電子機器１１０を制御するプロセッサ２１２の機能的表現として、通話提供部３１０が利用されてよい。

プロセッサ２１２は、電子機器１１０の制御と関連する命令がロードされたメモリ２１１から必要な命令を読み取ってよい。この場合、前記読み取られた命令は、プロセッサ２１２が以下で説明する段階４１０〜４５０を実行するように制御するための命令を含んでよい。

図４を参照すると、段階４１０で、通話提供部３１０は、電子機器１１０のユーザを含む、少なくとも２人以上のユーザが参加するＶｏＩＰ通話を提供してよい。ＶｏＩＰ通話は、ＶｏＩＰに基づき、音声通話機能とビデオ通話機能を含んでよい。このとき、ＶｏＩＰ通話は、１対１の通話はもちろん、事前に定められた最大人数以内のグループ通話を支援してよい。一例として、サーバ１５０は、電子機器１１０、１２０、１３０、１４０のユーザがＶｏＩＰ通話を要請する場合、相手の電子機器に通話要請を伝達してよく、通話参加を許諾したユーザを対象にしてＶｏＩＰに基づく通話チャネルを接続してよい。

ビデオ通話の場合、通話提供部３１０は、電子機器１１０のユーザの通話への参加意思をサーバ１５０に伝達し、サーバ１５０からＶｏＩＰ通話の参加者画像を個別の画像としてそれぞれ受信した後、受信した参加者画像を１つの画面にレンダリング（ｒｅｎｄｅｒｉｎｇ）してビデオ通話画面を構成してよい。サーバ１５０側で複数の参加者画像を含んだ１つの画像を生成して電子機器１１０に提供するのではなく、サーバ１５０が各参加者画像を個別の画像として電子機器１１０に送信し、電子機器１１０で複数の参加者画像を１つのビデオ通話画面として構成するのである。

音声通話の場合、通話提供部３１０は、通話への参加を許諾したユーザを対象にしてプロフィール情報などに基づいて参加者リストを生成し、参加者リストを含む音声通話画面を構成してよい。

段階４２０で、インタフェース提供部３２０は、ＶｏＩＰ通話中に電子機器１１０のユーザからコンテンツ共有機能を呼び出すユーザ入力が受信される場合、通話中の参加者と共有しようとするコンテンツを特定するためのＧＵＩ（ｇｒａｐｈｉｃａｌ ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）を提供してよい。ユーザ入力にはコンテンツ共有媒体として選択されたメディアタイプ（ｍｅｄｉａ ｔｙｐｅ）が含まれてよく、例えば、メディアタイプは、画面共有（ｓｃｒｅｅｎ ｓｈａｒｅ）、ユーチューブ（ＹｏｕＴｕｂｅ）のようなコンテンツ共有サービスを提供するコンテンツ提供者（ｃｏｎｔｅｎｔ ｐｒｏｖｉｄｅｒ）などを含んでよい。コンテンツ共有機能とは、通話参加者がＶｏＩＰ通話中に画面共有やコンテンツ共有サービスなどを利用してメディアコンテンツを共有することのできる機能を意味する。インタフェース提供部３２０は、ＶｏＩＰ通話画面上で通話参加者と共有するコンテンツを特定するためのインタフェースとして、ユーザ入力によるメディアタイプに対応するＧＵＩを提供してよい。

一例として、インタフェース提供部３２０は、メディアタイプのうちの１つとしてコンテンツ提供者のコンテンツを共有しようとする場合、コンテンツ検索のためのＧＵＩを提供してよい。インタフェース提供部３２０は、先ず、コンテンツ提供者を選択するための提供者選択画面を提供し、提供者選択画面でコンテンツ提供者が選択されれば、選択されたコンテンツ提供者のプラットフォーム内でコンテンツを検索するためのＧＵＩを提供してよい。言い換えれば、インタフェース提供部３２０は、コンテンツ共有サービスを提供するコンテンツ提供者リストを提供してよく、コンテンツ提供者リストで選択されたコンテンツ提供者のコンテンツを検索するためのインタフェースを提供してよい。ユーザは、メディアタイプとして特定のコンテンツ提供者を選択した後、該当のコンテンツ提供者のプラットフォーム内でコンテンツを検索することにより、通話参加者と共有するためのコンテンツを特定してよい。

他の例として、インタフェース提供部３２０は、メディアタイプのうちの他の１つとして画面共有を利用してコンテンツを共有しようとする場合、画面共有対象に対するプレビュー（ｐｒｅｖｉｅｗ）を含むＧＵＩを提供してよい。ＵＲＬを利用してコンテンツ提供者のコンテンツを共有しようとする場合も、該当のＵＲＬのコンテンツに対するプレビューを含むＧＵＩを提供してよい。クリップボードにコンテンツ提供者のコンテンツＵＲＬがコピーされた状態でＶｏＩＰ通話画面に進む場合には、コンテンツ共有機能の呼び出し命令として認識されてよい。このとき、インタフェース提供部３２０は、コンテンツ共有機能の呼び出し命令が認識されることにより、クリップボードにコピーされたＵＲＬに対するプレビューを含むＧＵＩを提供してよい。ユーザは、プレビューを見ながら画面共有の対象やＵＲＬのメディアコンテンツを確認した後、通話参加者と共有するためのコンテンツとして特定してよい。

インタフェース提供部３２０は、コンテンツを検索するためのＧＵＩを提供するにあたり、ＶｏＩＰ通話中のチャットルームに設定されたプロフィール情報または該当のチャットルームで過去に共有したことのあるデータに基づき、コンテンツ検索のための検索語を推薦してよい。ここで、プロフィール情報は、チャットルームのタイトル情報などを含んでよい。チャットルームに参加しているユーザのプロフィール情報、例えば、年齢、性別、居住地域などを考慮して検索語が推薦されてよい。プロフィール情報の他にも、過去の共有データ、例えば、チャットルームから送信されたメッセージまたはコンテンツを分析して関心事が導き出されてよく、導き出された関心事と関連するキーワードを推薦検索語として提供してよい。例えば、チャットルームで「コロナウイルス」に関するメッセージの割合が一定以上となる場合には、「コロナウイルス」と関連する検索語を推薦してよい。また、チャットルームに関する統計情報、例えば、最近のニュースを共有した回数が多い場合には、該当のニュースと関連する検索語を推薦してよい。また、チャットルームのコンテンツ共有履歴に基づき、例えば、ＶｏＩＰ電話中にＬＩＮＥ ＬＩＶＥを利用してＬＩＮＥ Ｆｒｉｅｎｄｓチャネルのビデオを最も多く共有した場合、ＬＩＮＥ ＬＩＶＥのリアルタイム人気検索語またはＬＩＮＥ Ｆｒｉｅｎｄｓチャネルと関連する検索語を推薦してよい。メッセンジャープラットフォーム上で複数のユーザが特定のタイトルを基準として集まってコンテンツをやり取りするオープンチャットルームの場合には、オープンチャットルームに設定されたタイトル情報に基づいて検索語が推薦されてもよい。

段階４３０で、共有要請部３３０は、電子機器１１０のユーザからＧＵＩによって特定されたコンテンツに対する共有要請を受信する場合、該当のコンテンツに対する共有要請をＶｏＩＰ通話チャネルのプロトコル内のメタデータとして生成してサーバ１５０に送信してよい。言い換えれば、共有要請部３３０は、コンテンツ共有要請に対応するデータを含むＶｏＩＰ通話パケットのメタデータを生成してサーバ１５０に送信してよい。

ＶｏＩＰ通話状態でデータを交換するためのコンテンツ共有プロトコルは、メディアタイプに応じて事前に定義されてよい。一例として、コンテンツ共有プロトコルは、コンテンツ共有機能を示す識別子（ｉｄｅｎｔｉｆｉｅｒ）と、メディアタイプに応じて定義されたメタデータとを含んでよい。コンテンツ共有のための開始（ｓｅｔ）と終了（ｕｎｓｅｔ）は、コア（ｃｏｒｅ）のイベントによって処理されてよい。メディアタイプがコンテンツ提供者の場合には、メディアタイプの識別子、ユーザによって特定されたコンテンツの識別子、タイトル、サムネイル、再生状態（ｐｌａｙｉｎｇ、ｐａｕｓｅなど）、再生位置（ｐｌａｙｂａｃｋ ｐｏｓｉｔｉｏｎ）などをＶｏＩＰ通話パケットのメタデータに追加してよく、ＵＲＬを利用してコンテンツ提供者のコンテンツを共有しようとする場合には、メディアタイプの識別子、コンテンツＵＲＬ、再生状態、再生位置などをＶｏＩＰ通話パケットのメタデータに追加してよい。メディアタイプが画面共有の場合には、メディアタイプの識別子、画面共有のために必要なデータなどをＶｏＩＰ通話パケットのメタデータに追加してよい。共有要請部３３０は、ＧＵＩ（プレビューまたは検索結果）で特定されたコンテンツを電子機器１１０のユーザと通話参加者との間に同期化し、再生に必要なすべての情報をＶｏＩＰのメタデータに記述してサーバ１５０に送信してよい。

段階４４０で、コンテンツ表示部３４０は、ＶｏＩＰ通話画面とともに、電子機器１１０のユーザの共有要請によるコンテンツを表示してよい。コンテンツ表示部３４０は、電子機器１１０のユーザがＧＵＩで特定したコンテンツに対する共有要請がサーバ１５０に伝達された後、ＶｏＩＰ通話画面とともに該当のコンテンツの再生画面（以下、「コンテンツ共有画面」とする）を表示してよい。一例として、コンテンツ表示部３４０は、通話提供部３１０との連動によってコンテンツ共有画面をＶｏＩＰ通話画面に含ませ、ＶｏＩＰ通話画面に結合された１つの画面として調整して表示してよい。他の例として、コンテンツ表示部３４０は、ＶｏＩＰ通話画面上にＰＩＰなどの個別の画面としてコンテンツ共有画面を重ねて（ｏｖｅｒｌａｙ）表示してもよい。

サーバ１５０は、ＶｏＩＰ通話パケットのメタデータに基づいてメディアタイプや共有対象コンテンツなどを認識してよく、通話参加者のうちでコンテンツ共有を要請した電子機器１１０はセンダー（ｓｅｎｄｅｒ）として判断し、残りの参加者の電子機器（１２０、１３０、１４０のうちの少なくとも１つ）はレシーバー（ｒｅｃｅｉｖｅｒ）として判断してよい。

サーバ１５０は、センダー側のコンテンツ共有要請に対応するデータを含むＶｏＩＰ通話パケットのメタデータを、レシーバーに該当する電子機器（１２０、１３０、１４０のうちの少なくとも１つ）に伝達する。サーバ１５０は、コンテンツを共有するセンダーとレシーバーとの間に、ＶｏＩＰ通話パケットのメタデータをそのまま伝達するリレーの役割を担うものであってよい。

レシーバーに該当する電子機器（１２０、１３０、１４０のうちの少なくとも１つ）では、サーバ１５０を介してセンダーから受信したＶｏＩＰ通話パケットのメタデータに基づき、センダーと同じ状態でコンテンツを共有してよい。共有対象がビデオの場合、センダー側では、メタデータにビデオに関する情報（例えば、ＵＲＬ情報（または、コンテンツ識別子）および開始時点に関する情報）だけを含ませるか、共有しようとするビデオパケットをともに含ませてレシーバーに伝達してよく、レシーバー側では、メタデータに含まれた情報に基づき、コンテンツ提供者からビデオをロードするか、ロード作業を経ずにセンダーから受信したＶｏＩＰ通話パケットに含まれたビデオをセンダー側での再生状態そのままで再生を始めてよい。再生リストに対する共有要請の場合、レシーバー側では、ＶｏＩＰ通話パケットのメタデータに基づいてセンダー側の状態を受信し、再生リストに含まれたビデオ情報はレシーバーが直接照会することによって該当の情報を満たして再生を始めてよい。

ＶｏＩＰ通話のためにはＶｏＩＰ通話パケットを伝達するリレーサーバ１５０が利用されると説明したが、これに限定されてはならず、サーバ１５０を経由しない、個人間の通信であるＰ２Ｐ（ｐｅｅｒ ｔｏ ｐｅｅｒ）が利用されてもよい。電子機器１１０は、１対１通信であるＰ２Ｐを利用することで、ユーザのコンテンツ共有要請に対応するデータを含むＶｏＩＰ通話パケットのメタデータをレシーバーに該当する電子機器１２０に直接伝達してよい。したがって、サーバ１５０を経由する必要がなく、センダーとレシーバーとがＰ２ＰによってＶｏＩＰ通話パケットをやり取りすることができ、ＶｏＩＰ通話パケットのメタデータを利用してＶｏＩＰ通話中にコンテンツを共有することができる。

レシーバーと共有するコンテンツを操作する権限は基本的にはセンダーにあり、センダー側のユーザが再生位置や再生状態などを変更する場合には変更されたデータを含むＶｏＩＰ通話パケットのメタデータをレシーバーに伝達することにより、センダーとレシーバーとが共有中のコンテンツ状態をセンダーの操作に合わせて同期化する。他の例として、レシーバーは、センダーあるいは他の通話参加者からの同意を得た上で、共有中のコンテンツ状態を変更したり他のコンテンツの共有を提案したりことも可能となる。

段階４５０で、リアクション表示部３５０は、ＶｏＩＰ通話中にコンテンツを共有する環境において、ＶｏＩＰ通話画面またはコンテンツ共有画面に対するユーザ入力に対応するリアクションを該当の画面上に表示してよい。ＶｏＩＰ通話画面またはコンテンツ共有画面上にリアクションを表示する具体的な方法については、以下で詳しく説明する。

図５〜８は、本発明の一実施形態における、ＶｏＩＰ通話中にコンテンツを共有する過程を説明するための例示図である。

図５〜８は、電子機器１１０のディスプレイに表示されるインタフェース画面の一例を示している。

図５を参照すれば、プロセッサ２１２は、ＶｏＩＰ通話の参加者画像を個別の画像としてそれぞれ受信した後、受信した参加者画像を１つの画面にレンダリングしてビデオ通話画面５１０を表示してよい。プロセッサ２１２は、ＶｏＩＰ通話中に電子機器１１０のユーザからコンテンツ共有機能を呼び出すユーザ入力が受信される場合、通話中の参加者と共有するコンテンツを特定するためのＧＵＩを提供してよい。

ビデオ通話画面５１０は、ユーザによる環境設定や参加者人数によって調整されてよく、例えば、参加者画像が１つの画面にすべて表示される形態で構成されてもよいし、参加者画像を一方向に整列した後、整列方向にスワイプ可能な形態で構成されてもよい。

プロセッサ２１２は、ユーザがメディアタイプのうちの１つとしてユーチューブ（ＹｏｕＴｕｂｅ）のようなコンテンツ提供者のコンテンツを共有しようとする場合、図５に示すように、コンテンツ検索のためのＧＵＩ５２０を提供してよい。プロセッサ２１２は、連係可能なコンテンツ提供者が複数ある場合には、先ず、コンテンツ提供者を選択するための提供者選択画面を提供した後、提供者選択画面からコンテンツ提供者が選択されれば、選択されたコンテンツ提供者のプラットフォーム内からコンテンツを検索するためのＧＵＩ５２０を提供してよい。

プロセッサ２１２は、ユーザが、メディアタイプのうちの他の１つとして画面共有によってコンテンツを共有しようとする場合、図６に示すように、電子機器１１０で実行される画面のうちで画面共有対象として特定された画面に対するプレビューを含むＧＵＩ６３０を提供してよい。

プロセッサ２１２は、コンテンツを特定するためのＧＵＩとして、コンテンツ検索ＧＵＩ５２０とプレビューＧＵＩ６３０をビデオ通話画面５１０上に重ねて（ｏｖｅｒｌａｙ）表示してもよいし（図５を参照）、ビデオ通話画面５１０を調整してビデオ通話画面５１０に結合させて１つの画面として表示してもよい（図６を参照）。

プロセッサ２１２は、ユーザがコンテンツ検索ＧＵＩ５２０またはプレビューＧＵＩ６３０でコンテンツを特定した後、特定したコンテンツの共有を要請する場合、該当のコンテンツを共有するためのデータを含むＶｏＩＰ通話パケットのメタデータをレシーバーに伝達してよい。これと同時に、プロセッサ２１２は、図７に示すように、ビデオ通話画面５１０とともに、共有要請されたコンテンツの再生画面であるコンテンツ共有画面７４０を表示してよい。

コンテンツ共有画面７４０をビデオ通話画面５１０に結合させて１つの画面として表示する場合、ビデオ通話画面５１０は、コンテンツ共有画面７４０を除いた残りの領域に参加者画像を組み合わせて表示してよい。このとき、ビデオ通話画面５１０は、自身の画像を提供する参加者画像がすべてまたは一部が表示される形態で構成してよい。または、ビデオ通話画面５１０は、参加者画像を一方向に整列した後、整列方向にスワイプ可能な形態で構成してもよい。

ビデオ通話でなく音声通話の場合、プロセッサ２１２は、図８に示すように、通話に参加中の参加者リストを含む音声通話画面８１０をＶｏＩＰ通話画面として提供してよい。プロセッサ２１２は、音声通話中にコンテンツを共有する場合、参加者リストを含む音声通話画面８１０とともにコンテンツ共有画面７４０を表示してよい。

したがって、本実施形態では、ソーシャルグラフを利用したＶｏＩＰ通話（音声通話またはビデオ通話）中に通話参加者が多様なメディアコンテンツを共有することができる。

図９は、本発明の一実施形態における、ＶｏＩＰ通話中にリアクションを表示する方法の例を示したフローチャートである。図９のリアクション表示方法は、リアクション表示部３５０によって実行されるものであり、図４のコンテンツ共有方法に含まれる段階４５０に含まれてよい。

段階９０１で、リアクション表示部３５０は、ＶｏＩＰ通話（音声通話またはビデオ通話）中に電子機器１１０のユーザからリアクションが入力された位置情報を受信してよい。一例として、リアクション表示部３５０は、ユーザがタッチなどによって実際にリアクションを入力した位置座標を、ユーザのリアクションが入力された画面（ＶｏＩＰ通話画面またはコンテンツ共有画面）上の位置情報として認識してよい。リアクションが入力された位置座標は、リアクションタイプによって一対のＸＹ座標からなってよく、この他にも、１つまたは２つ以上のタッチを追跡した軌跡情報としてＸＹ座標の集合からなってもよい。他の例として、リアクション表示部３５０は、コンテンツ共有画面に対して入力されたリアクションの場合、ユーザがリアクションを入力した時点にコンテンツ共有画面上で再生中のコンテンツの再生位置を、ユーザのリアクションが入力された位置情報として認識してよい。

段階９０２で、リアクション表示部３５０は、段階９０１で受信した位置情報に基づき、ＶｏＩＰ通話画面に含まれた参加者画像とコンテンツ共有画面のうちから電子機器１１０のユーザがリアクションを入力した対象（以下、「リアクション対象」とする）を特定してよい。ユーザは、ＶｏＩＰ通話画面に含まれた参加者画像のうちのいずれか１つの参加者画像またはコンテンツ共有画面に対してリアクションを入力してよく、このとき、リアクション表示部３５０は、ユーザのリアクションが入力された位置情報に基づいてリアクション対象を特定してよい。一例として、リアクション表示部３５０は、ＶｏＩＰ通話画面とコンテンツ共有画面のうちで、実際にリアクションが入力された位置座標に対応する画面をリアクション対象として特定してよい。ユーザがＶｏＩＰ通話画面内で特定の参加者の画像に対してリアクションを入力する場合、該当の参加者の識別子に基づいてリアクション対象を特定してよい。他の例として、リアクション表示部３５０は、コンテンツの再生位置がリアクション位置情報として認識される場合、コンテンツ共有画面をリアクション対象として特定してよい。他の例として、リアクション表示部３５０は、コンテンツの再生位置に該当する画面の少なくとも一部を分析してリアクション対象を特定してよい。このとき、リアクション表示部３５０は、画面の少なくとも一部に対するイメージデータをサーバ１５０に送信し、サーバ１５０またはサーバ１５０と連動可能なプラットフォーム上に構築されたイメージ学習モデルによってイメージデータから認識された事物、人物、場所などに関する情報をサーバ１５０から受信することにより、リアクション対象を特定してよい。

段階９０３で、リアクション表示部３５０は、電子機器１１０のユーザから入力されたリアクションとリアクション対象に関する情報とともに、該当のリアクションと関連する位置情報を、ＶｏＩＰ通話に参加している他のユーザ、すなわち通話参加者に送信してよい。リアクションに関する情報にはリアクションタイプが含まれてよく、リアクション対象に関する情報にはＶｏＩＰ通話画面内のどの参加者画像に対するリアクションであるか、あるいはコンテンツ共有画面に対するリアクションであるかを示す情報が含まれてよい。リアクション表示部３５０は、リアクションとリアクション対象に関する情報、およびリアクション位置情報をＶｏＩＰ通話チャネルのプロトコル内のメタデータとして生成し、サーバ１５０やＰ２Ｐを経て通話参加者に送信してよい。一例として、リアクション表示部３５０は、ＶｏＩＰ通話に参加するすべてのユーザを対象に、リアクションとリアクション対象に関する情報、およびリアクション位置情報を含むＶｏＩＰ通話パケットのメタデータを送信してよい。他の例として、リアクション表示部３５０は、ＶｏＩＰ通話に参加しているユーザのうちからリアクション対象に該当する参加者を特定し、該当の参加者に、リアクションに関する情報およびリアクション位置情報を含むＶｏＩＰ通話パケットのメタデータを送信してよい。

段階９０４で、リアクション表示部３５０は、ＶｏＩＰ通話画面とコンテンツ共有画面のうちでリアクション対象に該当する画面上に、リアクション位置情報に基づいて該当の位置にリアクションを表示してよい。リアクションごとに各リアクションとマッチングするオブジェクトが事前に定義されてよく、リアクション表示部３５０は、ユーザが入力したリアクションとマッチングするオブジェクトをリアクション対象と関連させて該当のリアクションが入力された位置に表示してよい。このとき、オブジェクトは、リアクションに対応して事前に定義されたイメージやエフェクトアニメーション（ｅｆｆｅｃｔ ａｎｉｍａｔｉｏｎ）などの視覚的要素を含んでよく、このような視覚的要素の他にも、ハプティクスなどの触覚的要素やオーディオに基づく聴覚的要素をさらに含んでもよい。

ＶｏＩＰ通話に参加している他のユーザの電子機器１２０、１３０、１４０すべてでＶｏＩＰ通話画面とともにコンテンツ共有画面を表示するようになるが、このとき、電子機器１１０から受信されたＶｏＩＰ通話パケットのメタデータに基づき、電子機器１１０のユーザが入力したリアクションとリアクション対象、およびリアクション位置情報を分析してよい。他のユーザの電子機器１２０、１３０、１４０では、ＶｏＩＰ通話画面およびコンテンツ共有画面のうちのリアクション対象に該当する画面上に、リアクション位置情報に基づき、該当の位置に電子機器１１０のユーザが入力したリアクションを表示してよい。実施形態によっては、ＶｏＩＰ通話に参加する他のユーザの電子機器１２０、１３０、１４０のうちのリアクション対象に該当する参加者の電子機器（例えば、１２０、１３０、１４０のうちの１２０）だけが電子機器１１０からリアクション関連メタデータを受信し、ＶｏＩＰ通話画面内の自身の参加者画像の画面上に電子機器１１０のユーザが入力したリアクションを表示してよい。

図１０〜１２は、本発明の一実施形態における、ＶｏＩＰ通話中にリアクションを表示する過程を説明するための例示図である。

図１０および図１１は、ビデオ通話中にユーザがリアクションを伝達するシナリオを示している。

図１０を参照すると、電子機器１１０のユーザは、ビデオ通話に参加している他のユーザと同じ動画をコンテンツ共有画面７４０で共有してよく、このとき、動画を見ながら特定の再生位置にリアクションを記録してよい。

プロセッサ２１２は、コンテンツ共有画面７４０と関連するリアクション入力インタフェース（例えば、いいねボタン）１００１によってリアクションが入力される場合、ユーザがリアクションを入力した時点のコンテンツの再生位置をユーザのリアクションが入力された位置情報として認識してよい。

プロセッサ２１２は、コンテンツ共有画面７４０上に、一例として、コンテンツの再生位置を示すプログレスバー（ｐｒｏｇｒｅｓｓ ｂａｒ）１０４１上に、ユーザが入力したリアクションのイメージ１００２を表示してよく、このとき、リアクションイメージ１００２は、ユーザがリアクションを入力した時点の再生位置と対応する地点に表示されてよい。

ＶｏＩＰ通話に参加している他のユーザの電子機器１２０、１３０、１４０すべてにおいて、電子機器１１０のユーザと共有しているコンテンツ共有画面７４０上に電子機器１１０のユーザが入力したリアクションが該当のリアクションの入力位置に表示されてよく、これにより、ＶｏＩＰ通話に参加しているユーザがリアクションを記録した位置を共有することができる。

図１１を参照すると、電子機器１１０のユーザは、コンテンツ共有画面として電子機器１１０で実行されている画面のうちから画面共有対象として特定されたショッピングサイト画面１１５０をビデオ通話に参加している他のユーザと共有してよく、このとき、画面共有しているショッピングサイト画面１１５０の特定のアイテムに対してリアクションを記録してよい。

プロセッサ２１２は、コンテンツ共有画面に該当するショッピングサイト画面１１５０に対するユーザ入力にしたがってリアクション入力インタフェース１１０１を表示してよく、このとき、ユーザは、リアクション入力インタフェース１１０１を利用してショッピングサイト画面１１５０内の特定のアイテムの位置にリアクションを入力してよい。

プロセッサ２１２は、ショッピングサイト画面１１５０上でユーザがリアクションを入力した位置に、ユーザが入力したリアクションのイメージ１１０２を表示してよい。

ＶｏＩＰ通話に参加している他のユーザの電子機器１２０、１３０、１４０すべてにおいて、電子機器１１０のユーザと共有しているショッピングサイト画面１１５０上に電子機器１１０のユーザが入力したリアクションを該当のリアクションの入力位置に表示することができ、これにより、ＶｏＩＰ通話に参加するユーザがリアクションを記録した位置を共有することができる。

プロセッサ２１２は、ＶｏＩＰ通話参加者中にリアクションを入力したユーザを識別してビデオ通話画面５１０内の該当のユーザの画像画面上にリアクションイメージ１００２、１１０２を表示してよく、これにより、ＶｏＩＰ通話に参加しているユーザのうちのどのユーザによるリアクションであるかを簡単に把握することができる。

上述したようなシナリオの他にも、画面共有を利用した協業の場合も、図１１を参照しながら説明したシナリオと同じように、ＶｏＩＰ通話に参加するユーザが協業文書が表示された画面を共有しながら、画面上の文書内の特定の部分に対する質問や意見などをリアクションとして伝達することもできる。

ＶｏＩＰ通話中に共有しているコンテンツに対するリアクションの他にも、ビデオ通話画面５１０内の特定の参加者を指定してリアクションを伝達することも可能である。プロセッサ２１２は、電子機器１１０のユーザがビデオ通話画面５１０で特定の参加者を選択してリアクションを入力する場合、ビデオ通話画面５１０内の該当の参加者画像の画面上にリアクションイメージを表示してよい。

ＶｏＩＰ通話中のリアクションは、一方が伝達したものを表示することはもちろん、双方がやり取りしたものを表示することも可能である。例えば、ＶｏＩＰ通話に参加中のユーザ１がハートの一部を描いて伝達すれば、ユーザ２が残りの部分を描いてハートを完成させる形態のリアクションを適用してよい。

さらに、プロセッサ２１２は、ＶｏＩＰ通話中に共有するメディアコンテンツに関する情報とＶｏＩＰ通話中に受信したリアクションに関する情報を、該当のＶｏＩＰ通話を進行中のチャットルームに送信して管理してよい。

図１２を参照すると、プロセッサ２１２は、図１０のシナリオのように、ＶｏＩＰ通話に参加中のユーザがＶｏＩＰ通話中に共有した動画に対してリアクションを記録した場合、該当の動画のサムネイル、リアクションオブジェクト、リアクションを入力した時間、ユーザニックネームなどを受信し、チャットルーム１２００に含まれたメッセージタイプ１２０１で記録して表示してよい。

また、プロセッサ２１２は、図１１のシナリオのように、ＶｏＩＰ通話に参加中のユーザがＶｏＩＰ通話中に共有した画面に対してリアクションを記録した場合、共有画面のキャプチャ（ｃａｐｔｕｒｅ）画像、リアクションオブジェクト、リアクションを入力した時間、ユーザニックネームなどを受信し、チャットルーム１２００に含まれたメッセージタイプ１２０２で記録して表示してよい。このとき、ＶｏＩＰ通話に参加中のユーザがＶｏＩＰ通話中に他のユーザを対象としてリアクションを入力した場合、リアクションの対象となるユーザのイメージとともに、リアクションを入力したユーザのリアクションオブジェクトを表示してよい。

したがって、プロセッサ２１２は、ＶｏＩＰ通話中にやり取りしたメディアコンテンツとリアクションに関する情報をチャットルーム１２００で管理することにより、ＶｏＩＰ通話と関連するヒストリーを構築することができる。言い換えれば、ＶｏＩＰ通話が終了した後でも、ＶｏＩＰ通話中にやり取りしたメディアコンテンツとリアクションに関する資料がチャットルーム１２００に記録されるようにすることができる。

このように、本発明の実施形態によると、ＶｏＩＰ通話中に通話参加者がやり取りしたリアクションをリアルタイムで表示することができる。

上述した装置は、ハードウェア構成要素、ソフトウェア構成要素、および／またはハードウェア構成要素とソフトウェア構成要素との組み合わせによって実現されてよい。例えば、実施形態で説明された装置および構成要素は、プロセッサ、コントローラ、ＡＬＵ（ａｒｉｔｈｍｅｔｉｃ ｌｏｇｉｃ ｕｎｉｔ）、デジタル信号プロセッサ、マイクロコンピュータ、ＦＰＧＡ（ｆｉｅｌｄ ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙ）、ＰＬＵ（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｕｎｉｔ）、マイクロプロセッサ、または命令を実行して応答することができる様々な装置のように、１つ以上の汎用コンピュータまたは特殊目的コンピュータを利用して実現されてよい。処理装置は、オペレーティングシステム（ＯＳ）およびＯＳ上で実行される１つ以上のソフトウェアアプリケーションを実行してよい。また、処理装置は、ソフトウェアの実行に応答し、データにアクセスし、データを記録、操作、処理、および生成してもよい。理解の便宜のために、１つの処理装置が使用されるとして説明される場合もあるが、当業者は、処理装置が複数個の処理要素および／または複数種類の処理要素を含んでもよいことが理解できるであろう。例えば、処理装置は、複数個のプロセッサまたは１つのプロセッサおよび１つのコントローラを含んでよい。また、並列プロセッサのような、他の処理構成も可能である。

ソフトウェアは、コンピュータプログラム、コード、命令、またはこれらのうちの１つ以上の組み合わせを含んでもよく、思うままに動作するように処理装置を構成したり、独立的または集合的に処理装置に命令したりしてよい。ソフトウェアおよび／またはデータは、処理装置に基づいて解釈されたり、処理装置に命令またはデータを提供したりするために、いかなる種類の機械、コンポーネント、物理装置、コンピュータ記録媒体または装置に具現化されてよい。ソフトウェアは、ネットワークによって接続されたコンピュータシステム上に分散され、分散された状態で記録されても実行されてもよい。ソフトウェアおよびデータは、１つ以上のコンピュータ読み取り可能な記録媒体に記録されてよい。

実施形態に係る方法は、多様なコンピュータ手段によって実行可能なプログラム命令の形態で実現されてコンピュータ読み取り可能な媒体に記録されてよい。ここで、媒体は、コンピュータ実行可能なプログラムを継続して記録するものであっても、実行またはダウンロードのために一時記録するものであってもよい。また、媒体は、単一または複数のハードウェアが結合した形態の多様な記録手段または格納手段であってよく、あるコンピュータシステムに直接接続する媒体に限定されることはなく、ネットワーク上に分散して存在するものであってもよい。媒体の例としては、ハードディスク、フロッピー（登録商標）ディスク、および磁気テープのような磁気媒体、ＣＤ−ＲＯＭおよびＤＶＤのような光媒体、フロプティカルディスク（ｆｌｏｐｔｉｃａｌ ｄｉｓｋ）のような光磁気媒体、およびＲＯＭ、ＲＡＭ、フラッシュメモリなどを含み、プログラム命令が記録されるように構成されたものであってよい。また、媒体の他の例として、アプリケーションを配布するアプリケーションストアやその他の多様なソフトウェアを供給または配布するサイト、サーバなどで管理する記録媒体または格納媒体が挙げられる。

以上のように、実施形態を、限定された実施形態および図面に基づいて説明したが、当業者であれば、上述した記載から多様な修正および変形が可能であろう。例えば、説明された技術が、説明された方法とは異なる順序で実行されたり、かつ／あるいは、説明されたシステム、構造、装置、回路などの構成要素が、説明された方法とは異なる形態で結合されたりまたは組み合わされたり、他の構成要素または均等物によって対置されたり置換されたとしても、適切な結果を達成することができる。

したがって、異なる実施形態であっても、特許請求の範囲と均等なものであれば、添付される特許請求の範囲に属する。

２１２：プロセッサ
３１０：通話提供部
３２０：インタフェース提供部
３３０：共有要請部
３４０：コンテンツ表示部
３５０：リアクション表示部

Claims (20)

1. コンピュータ装置が実行するリアクション表示方法であって、
   前記コンピュータ装置は、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、
   前記リアクション表示方法は、
   前記少なくとも１つのプロセッサが、前記コンピュータ装置のユーザが参加するＶｏＩＰ通話中にメディアコンテンツを共有する場合、ＶｏＩＰ通話画面とともにコンテンツ共有画面を表示する段階、
   前記少なくとも１つのプロセッサが、前記ＶｏＩＰ通話中に前記コンピュータ装置のユーザからリアクションが入力された位置情報を受信する段階、
   前記少なくとも１つのプロセッサが、前記ＶｏＩＰ通話に参加する少なくとも１人の他のユーザを対象にして前記リアクションに関する情報と前記位置情報を送信する段階、および
   前記少なくとも１つのプロセッサが、前記位置情報に基づいて前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上に前記リアクションを表示する段階
   を含む、リアクション表示方法。
2. 前記受信する段階は、
   前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上の位置情報として前記リアクションが入力された位置座標を認識する段階
   を含む、請求項１に記載のリアクション表示方法。
3. 前記受信する段階は、
   前記コンテンツ共有画面に対して入力されたリアクションの場合、前記コンピュータ装置のユーザがリアクションを入力した時点に前記コンテンツ共有画面上で再生中のコンテンツの再生位置を前記位置情報として認識する段階
   を含む、請求項１に記載のリアクション表示方法。
4. 前記リアクション表示方法は、
   前記少なくとも１つのプロセッサが、前記位置情報に基づき、前記ＶｏＩＰ通話画面に含まれた参加者画像と前記コンテンツ共有画面のうちからリアクション対象を特定する段階
   をさらに含む、請求項１に記載のリアクション表示方法。
5. 前記特定する段階は、
   前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうち、前記リアクションが入力された位置座標に対応する画面を前記リアクション対象として特定すること
   を特徴とする、請求項４に記載のリアクション表示方法。
6. 前記特定する段階は、
   前記コンテンツ共有画面上で再生中のコンテンツの再生位置が前記位置情報として受信された場合、前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうちで前記コンテンツ共有画面を前記リアクション対象として特定すること
   を特徴とする、請求項４に記載のリアクション表示方法。
7. 前記送信する段階は、
   前記ＶｏＩＰ通話に参加している他のユーザのうちから前記リアクション対象に対応するユーザを特定し、前記特定されたユーザを対象にして前記リアクションに関する情報と前記位置情報を送信すること
   を特徴とする、請求項４に記載のリアクション表示方法。
8. 前記送信する段階は、
   前記リアクションに関する情報と前記位置情報を含むＶｏＩＰ通話パケットのメタデータを生成して送信し、
   前記他のユーザのコンピュータ装置では、前記メタデータに基づき、前記他のユーザのコンピュータ装置の画面上に前記リアクションが表示されること
   を特徴とする、請求項１に記載のリアクション表示方法。
9. 前記表示する段階は、
   前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうちで前記位置情報に対応する画面上の位置に前記リアクションとマッチングするオブジェクトを表示すること
   を特徴とする、請求項１に記載のリアクション表示方法。
10. 前記リアクション表示方法は、
    前記少なくとも１つのプロセッサが、前記ＶｏＩＰ通話中に共有する前記メディアコンテンツに関する情報と前記ＶｏＩＰ通話中に受信した前記リアクションに関する情報を前記ＶｏＩＰ通話と関連するチャットルームに送信する段階
    をさらに含む、請求項１に記載のリアクション表示方法。
11. 前記ＶｏＩＰ通話と関連するチャットルームに送信する段階は、
    前記メディアコンテンツに関する情報と前記リアクションに関する情報を前記チャットルームに含まれたメッセージタイプで管理する段階
    を含む、請求項１０に記載のリアクション表示方法。
12. 請求項１〜１１のうちのいずれか一項に記載のリアクション表示方法を前記コンピュータシステムに実行させる、コンピュータプログラム。
13. コンピュータ装置であって、
    メモリに含まれるコンピュータ読み取り可能な命令を実行するように実現される少なくとも１つのプロセッサ
    を含み、
    前記少なくとも１つのプロセッサは、
    前記コンピュータ装置のユーザが参加するＶｏＩＰ通話中にメディアコンテンツを共有する場合、ＶｏＩＰ通話画面とともにコンテンツ共有画面を表示する過程、
    前記ＶｏＩＰ通話中に前記コンピュータ装置のユーザからリアクションが入力された位置情報を受信する過程、
    前記ＶｏＩＰ通話に参加している少なくとも１人の他のユーザを対象にして前記リアクションに関する情報と前記位置情報を送信する過程、および
    前記位置情報に基づき、前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上に前記リアクションを表示する過程
    を処理する、コンピュータ装置。
14. 前記少なくとも１つのプロセッサは、
    前記ＶｏＩＰ通話画面または前記コンテンツ共有画面上の位置情報として前記リアクションが入力された位置座標を認識すること
    を特徴とする、請求項１３に記載のコンピュータ装置。
15. 前記少なくとも１つのプロセッサは、
    前記コンテンツ共有画面に対して入力されたリアクションの場合、前記コンピュータ装置のユーザがリアクションを入力した時点に前記コンテンツ共有画面上で再生中のコンテンツの再生位置を前記位置情報として認識すること
    を特徴とする、請求項１３に記載のコンピュータ装置。
16. 前記少なくとも１つのプロセッサは、
    前記位置情報に基づき、前記ＶｏＩＰ通話画面に含まれた参加者画像と前記コンテンツ共有画面のうちからリアクション対象を特定すること
    を特徴とする、請求項１３に記載のコンピュータ装置。
17. 前記少なくとも１つのプロセッサは、
    前記ＶｏＩＰ通話に参加している他のユーザのうちから前記リアクション対象に対応するユーザを特定し、前記特定されたユーザを対象にして前記リアクションに関する情報と前記位置情報を送信すること
    を特徴とする、請求項１６に記載のコンピュータ装置。
18. 前記少なくとも１つのプロセッサは、
    前記リアクションに関する情報と前記位置情報を含むＶｏＩＰ通話パケットのメタデータを生成して送信し、
    前記他のユーザのコンピュータ装置では、前記メタデータに基づき、前記他のユーザのコンピュータ装置の画面上に前記リアクションが表示されること
    を特徴とする、請求項１３に記載のコンピュータ装置。
19. 前記少なくとも１つのプロセッサは、
    前記ＶｏＩＰ通話画面と前記コンテンツ共有画面のうちで前記位置情報に対応する画面上の位置に前記リアクションとマッチングするオブジェクトを表示すること
    を特徴とする、請求項１３に記載のコンピュータ装置。
20. 前記少なくとも１つのプロセッサは、
    前記ＶｏＩＰ通話中に共有する前記メディアコンテンツに関する情報と前記ＶｏＩＰ通話中に受信した前記リアクションに関する情報を前記ＶｏＩＰ通話と関連するチャットルームに送信し、前記チャットルームに含まれたメッセージタイプで管理すること
    を特徴とする、請求項１３に記載のコンピュータ装置。

Images