JP7082224B1 - 情報処理装置、及び制御方法 - Google Patents

Abstract

【課題】オンラインによるビデオ会議の利便性を向上させること。【解決手段】情報処理装置は、ネットワークを介して他の情報処理装置から映像及び音声を送受信するアプリケーションを実行する情報処理装置であって、アプリケーションを用いて他の情報処理装置から受信した映像が表示される表示部の画面領域のうち映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャするキャプチャ部と、アプリケーションの実行中にキャプチャ部による所定時間ごとのキャプチャを継続しながら、キャプチャ部によりキャプチャされた一連の静止画ファイルのうちの少なくとも一部の画像を前記表示部に表示させる表示制御部と、を備える。【選択図】図５

Description

本発明は、情報処理装置、及び制御方法に関する。

ネットワークを介してオンラインでビデオ会議を行うためのアプリケーションがある。このようなアプリケーションは、ビデオ会議に参加しているユーザがそれぞれ使用している情報処理装置からユーザの映像及び音声を送受信するだけでなく、同一の資料データをそれぞれの情報処理装置で閲覧できるように共有する機能を有しているものがある（例えば、特許文献１）。

特開２０１９－６１５９４号公報

上述したようなアプリケーションでは、発表者が他の参加者へ資料を共有しながら説明する場面がある。しかしながら、発表者が資料のページを送りながら説明を行っているときに、参加者側としては、発表者が現在表示させている資料のページよりも前のページを見たい場合がある。例えば、発表者の話す速度が速く前のページの内容をもう少し確認したい、現在表示されているページと前のページとのつながりを確認したい、質問をする前にもう一度確認したいページがあるといった場合などがある。そのような場合、参加者は、自身の意思で確認したいページを閲覧することができないため不便であった。

本発明は上記した事情に鑑みてなされたもので、オンラインによるビデオ会議の利便性を向上させる情報処理装置、及び制御方法を提供することを目的の一つとする。

本発明は上記の課題を解決するためになされたものであり、本発明の第１態様に係る情報処理装置は、ネットワークを介して他の情報処理装置から映像及び音声を送受信するアプリケーションを実行する情報処理装置であって、前記アプリケーションを用いて他の情報処理装置から受信した映像が表示される表示部の画面領域のうち前記映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャするキャプチャ部と、前記アプリケーションの実行中に前記キャプチャ部による前記所定時間ごとのキャプチャを継続しながら、前記キャプチャ部によりキャプチャされた一連の静止画ファイルのうちの少なくとも一部の画像を前記表示部に表示させる表示制御部と、を備える。

上記情報処理装置において、前記表示制御部は、前記キャプチャ部によりキャプチャされた一連の静止画ファイルのそれぞれをキャプチャ順に対応して選択可能なユーザインタフェースを前記表示部に表示させるとともに、当該ユーザインタフェースに対する操作に応じて選択された静止画ファイルの画像を前記表示部に表示させてもよい。

上記情報処理装置において、前記キャプチャ部は、前記表示部の全画面領域をキャプチャしてもよい。

上記情報処理装置において、前記キャプチャ部は、前記表示部の画面領域のうち前記映像が表示される前記アプリケーションのウィンドウ領域をキャプチャしてもよい。

上記情報処理装置は、前記キャプチャ部は、前記表示部の画面領域のうち指定された一部の領域をキャプチャしてもよい。

上記情報処理装置は、前記映像を画像解析することにより前記映像から特定領域を検出する領域検出部をさらに備え、前記キャプチャ部は、前記表示部の画面領域のうち前記領域検出部により検出された特定領域をキャプチャしてもよい。

上記情報処理装置は、前記キャプチャ部によりキャプチャされる度に、今回キャプチャされた静止画ファイルの画像を以前にキャプチャされた静止画ファイルの画像と比較して類似性を判定する類似性判定部をさらに備え、前記表示制御部は、前記類似性判定部により以前にキャプチャされた静止画ファイルの画像との類似度が所定の閾値以上であると判定された静止画ファイルの画像を、前記表示部に表示させる表示対象から除外してもよい。

上記情報処理装置は、前記キャプチャ部によりキャプチャされた一連の静止画ファイルの画像のそれぞれを、キャプチャ順にページごとに割付けた一つのデータファイルとして生成するファイル生成部、をさらに備えてもよい。

上記情報処理装置は、前記キャプチャ部によりキャプチャされる度に、今回キャプチャされた静止画ファイルの画像を以前にキャプチャされた静止画ファイルの画像と比較して類似性を判定する類似性判定部をさらに備え、前記ファイル生成部は、前記類似性判定部により以前にキャプチャされた静止画ファイルの画像との類似度が所定の閾値以上であると判定された静止画ファイルを前記一連の静止画ファイルから除いた残りの静止画ファイルの画像を、キャプチャ順にページごとに割付けた一つのデータファイルとして生成してもよい。

上記情報処理装置において、前記ファイル生成部は、前記アプリケーションの実行中に前記キャプチャ部による所定時間ごとのキャプチャを継続しながら、前記キャプチャ部によりキャプチャ済みの静止画ファイルの画像に基づいて前記一つのデータファイルを生成してもよい。

上記情報処理装置において、前記キャプチャ部は、前記アプリケーションがマイクロフォン又はスピーカを占有したことを検知した場合、前記キャプチャを開始してもよい。

上記情報処理装置において、前記キャプチャ部は、前記アプリケーションがマイクロフォン又はスピーカを開放したことを検知した場合、前記キャプチャを終了してもよい。

また、本発明の第２態様に係る、ネットワークを介して他の情報処理装置から映像及び音声を送受信するアプリケーションを実行する情報処理装置における制御方法は、キャプチャ部が、前記アプリケーションを用いて他の情報処理装置から受信した映像が表示される表示部の画面領域のうち前記映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャするステップと、表示制御部が、前記アプリケーションの実行中に前記キャプチャ部による前記所定時間ごとのキャプチャを継続しながら、前記キャプチャ部によりキャプチャされた一連の静止画ファイルのうちの少なくとも一部の画像を前記表示部に表示させるステップと、を含む。

本発明の上記態様によれば、オンラインによるビデオ会議の利便性を向上させることができる。

第１の実施形態に係る情報処理装置の外観を示す斜視図。 第１の実施形態に係るレビューアプリの表示例を示す図。 第１の実施形態に係るレビューアプリによるキャプチャ画像とその表示の説明図。 第１の実施形態に係る情報処理装置のハードウェア構成の一例を示すブロック図。 第１の実施形態に係る情報処理装置の機能構成の一例を示すブロック図。 第１の実施形態に係るキャプチャ画像ファイルの一例を示す図。 第１の実施形態に係るレビュー処理の一例を示すフローチャート。 第１の実施形態に係るキャプチャ処理の一例を示すフローチャート。 第２の実施形態に係るコンテンツ領域の切り出しについての説明図。 第２の実施形態に係る切り出し後のキャプチャ画像の表示例を示す図。 第２の実施形態に係る情報処理装置の機能構成の一例を示すブロック図。 第２の実施形態に係るキャプチャ画像ファイルの一例を示す図。 第２の実施形態に係るキャプチャ処理の一例を示すフローチャート。 第２の実施形態に係るスライドファイル生成処理の一例を示すフローチャート。

以下、図面を参照しながら本発明の実施形態について詳しく説明する。
＜第１の実施形態＞
まず、本実施形態に係る情報処理装置の概要について説明する。
図１は、本実施形態に係る情報処理装置の外観を示す斜視図である。図示する情報処理装置１０は、クラムシェル型のノートＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）である。情報処理装置１０は、第１筐体１０１、第２筐体１０２、及びヒンジ機構１０３を備えている。第１筐体１０１及び第２筐体１０２は、略四角形の板状（例えば、平板状）の筐体である。第１筐体１０１の側面の一つと第２筐体１０２の側面の一つとがヒンジ機構１０３を介して結合（連結）されており、ヒンジ機構１０３がなす回転軸の周りに第１筐体１０１と第２筐体１０２とが相対的に回動可能である。第１筐体１０１と第２筐体１０２との回転軸の周りの開き角θが略０°の状態が、第１筐体１０１と第２筐体１０２とが重なり合って閉じた状態（「閉状態」と称する）である。閉状態において第１筐体１０１と第２筐体１０２との互いに対面する側の面を、それぞれの「内面」と呼び、内面に対して反対側の面を「外面」と称する。開き角θとは、第１筐体１０１の内面と第２筐体１０２の内面とがなす角とも言うことができる。閉状態に対して第１筐体１０１と第２筐体１０２とが開いた状態のことを「開状態」と称する。開状態とは、開き角θが予め設定された閾値（例えば、１０°）より大きくなるまで、第１筐体１０１と第２筐体１０２とが相対的に回動された状態である。

第１筐体１０１の内面には、表示部１４が設けられている。表示部１４は、情報処理装置１０に実行される処理に基づく映像を表示する。また、第１筐体１０１の内面のうち表示部１４の周縁の領域に、撮像部２７（カメラ）及びマイク（マイクロフォン）２４１が設けられている。即ち、撮像部２７及びマイク２４１は、情報処理装置１０を使用するユーザと対面するような位置に設けられている。なお、マイク２４１は、右側用と左側用の２つのマイクに分かれて設けられてもよい。

また、第２筐体１０２の内面には、ユーザの操作を受け付ける入力デバイスとしてキーボード３２及びスピーカ２４２が設けられている。なお、スピーカ２４２は、右側用と左側用の２つのスピーカに分かれて設けられてもよい。閉状態では、表示部１４が視認できない状態、且つキーボード３２への操作ができない状態となる。一方、開状態では、表示部１４が視認可能な状態、且つキーボード３２への操作が可能な状態（即ち、情報処理装置１０を使用可能な状態）となる。

情報処理装置１０は、各種のアプリケーションのプログラムを実行することができる。例えば、情報処理装置１０は、撮像部２７により撮像される映像やマイク２４１に入力される音声などを用いるアプリケーションのプログラムを実行する。一例として、複数のユーザのそれぞれが端末装置を用いて双方向に映像及び音声を通信するアプリケーションがあり、ビデオ会議などに使用される。このようなビデオ会議に使用できるアプリケーションのことを、以下では「ビデオ会議アプリ」と称する。情報処理装置１０は、ビデオ会議アプリを実行することにより、ビデオ会議アプリを用いて他のユーザとビデオ会議を行う際の端末装置として利用することができる。

情報処理装置１０を用いてユーザがビデオ会議アプリを使用する場合、撮像部２７は、表示部１４に対面するユーザ（ビデオ会議の参加者）などが含まれる映像を撮像する。また、マイク２４１には、当該ユーザが発する音声などが入力される。情報処理装置１０は、ビデオ会議アプリの処理に基づいて撮像部２７により撮像された映像及びマイク２４１に入力された音声を、ビデオ会議に参加する他のユーザの端末装置へネットワークを介して送信する。また、情報処理装置１０は、他のユーザの端末装置から取映像及び音声を取得し、取得した映像を表示部１４に表示するとともに、取得した音声をスピーカ２４２などから出力する。このように、ビデオ会議アプリを使用することにより、ビデオ会議に参加する各ユーザは、互いにユーザの映像を見ながら会話を行うことができる。

また、ビデオ会議アプリには、同一の資料データをそれぞれの端末装置で閲覧できるように共有する機能を有しているものがある。この機能を用いて、発表者が他の参加者へ資料を共有しながら説明する場面がある。しかしながら、発表者が資料のページを送りながら説明を行っているときに、参加者側としては、発表者が現在表示させている資料のページよりも前のページを見たい場合がある。

そこで、本実施形態に係る情報処理装置１０は、ビデオ会議アプリを用いて他のユーザの端末装置から受信した映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャする。そして、情報処理装置１０は、ビデオ会議アプリの実行中に、上記所定時間ごとのキャプチャを継続しながら、キャプチャされた一連の静止画ファイルのうちの少なくとも一部の画像を表示させることが可能である。これにより、情報処理装置１０は、ユーザが現在表示されている資料のページよりも前のページを見たいときには、キャプチャ済みの画像の中からユーザが任意に選択して表示することが可能である。以下、キャプチャ済みの画像のことを「キャプチャ画像」、キャプチャした静止画ファイルのことを「キャプチャ画像ファイル」と称する。

このビデオ会議アプリの映像をキャプチャする機能とキャプチャ画像を表示する機能とは、例えばビデオ会議アプリとは別のアプリケーション（以下、「レビューアプリ」と称する）を実行することにより実現される。これにより、レビューアプリは、対象とするアプリを限定することなく使用することができる。

図２及び図３を参照して、レビューアプリの概要を説明する。
図２は、本実施形態に係るレビューアプリの表示例を示す図である。表示画面Ｇ１０は、情報処理装置１０の表示部１４の全画面領域を示している。表示画面Ｇ１０には、ビデオ会議アプリのウィンドウＷＶが全画面表示されている。ビデオ会議アプリのウィンドウＷＶには、ビデオ会議に参加している他のユーザや、共有されている資料などを表示することができる。図示する例では、共有されている資料の現在のページが表示されている。また、表示画面Ｇ１０には、レビューアプリのウィンドウＷＲがビデオ会議アプリのウィンドウＷＶに重畳して表示されている。レビューアプリのウィンドウＷＲには、ビデオ会議アプリのウィンドウＷＶに過去に表示されたキャプチャ画像が表示される。レビューアプリのウィンドウＷＲは、アクティブウィンドウであるがビデオ会議アプリのウィンドウＷＲよりも小さいサイズで表示されている。そのため、ユーザは、ビデオ会議アプリのウィンドウＷＲを見ながらビデオ会議をしている最中に、レビューアプリのウィンドウＷＲに任意のキャプチャ画像を表示させて確認することができる。

図３は、本実施形態に係るレビューアプリによるキャプチャ画像とその表示の説明図である。この図では、キャプチャ画像ファイルが保存されるフォルダ内のファイルが表示されるウィンドウＷＦと、図２に示すレビューアプリのウィンドウＷＲとを示している。上記フォルダには、所定時間ごと（例えば、１０秒ごと）にキャプチャされたキャプチャ画像ファイルがキャプチャ順に保存される。各キャプチャ画像ファイルのファイル名は、例えば、各キャプチャ画像の時刻に基づいて生成される。フォルダは、レビューアプリによりキャプチャが開始されてから終了するまでの１回のキャプチャ期間ごとに作成されてもよい。

スライダＳＤ１は、ユーザがレビューアプリのウィンドウＷＲに表示させるキャプチャ画像を選択するための操作ＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）として表示される。キャプチャ画像は、キャプチャ順にスライダＳＤ１の左端から右端へ対応付けられている。スライダＳＤ１を左に移動させるほど先にキャプチャされたキャプチャ画像が表示され、スライダＳＤ１を右に移動させるほど後からキャプチャされたキャプチャ画像が表示される。スライダＳＤ１を左端に移動させると最初にキャプチャされたキャプチャ画像が表示され、スライダＳＤ１を右端に移動させるとその時点で最後にキャプチャされたキャプチャ画像が表示される。例えば、９枚のキャプチャ画像のファイルが保存されている場合、スライダＳＤ１を左端に移動させると１枚目のキャプチャ画像が表示され、スライダＳＤ１を中央に移動させると５枚目のキャプチャ画像が表示され、スライダＳＤ１を右端に移動させると９枚目のキャプチャ画像が表示される。スライダＳＤ１のスライダバーの長さが保存されているキャプチャ画像の枚数で均等割りされ、スライダＳＤ１の位置に対応するキャプチャ画像が表示されることになる。時間が経過して１０枚目のキャプチャ画像が保存されると、スライダＳＤ１のスライダバーの長さが９枚で均等割りされていた状態から１０枚での均等割りに変更され、スライダＳＤ１を右端に移動させると１０枚目のキャプチャ画像が表示される。時刻表示ＴＳは、レビューアプリのウィンドウＷＲに現在表示されているキャプチャ画像の時刻情報が表示される。例えば、時刻表示ＴＳには、現在表示されているキャプチャ画像がキャプチャされたときの時刻またはキャプチャ開始から経過時間のいずれか一方又は両方が表示される。

このように、情報処理装置１０は、ビデオ会議で発表者が他の参加者へ資料を共有しながら説明しているときに、発表者が現在表示させている資料のページより任意の時間前に表示されていた資料のページを参加者が表示させて確認することができる。以下、本実施形態に係る情報処理装置１０の構成について詳しく説明する。

［情報処理装置１０のハードウェア構成］
まず、図４を参照して、情報処理装置１０の主要なハードウェア構成について説明する。図４は、本実施形態に係る情報処理装置１０のハードウェア構成の一例を示すブロック図である。

情報処理装置１０は、ＣＰＵ１１と、メインメモリ１２と、ビデオサブシステム１３と、表示部１４と、チップセット２１と、ＢＩＯＳメモリ２２と、記憶部２３と、オーディオシステム２４と、通信部２５と、ＵＳＢコネクタ２６と、撮像部２７と、エンベデッドコントローラ３１と、キーボード３２と、電源回路３３と、バッテリ３４と、センサ３５とを備える。

ＣＰＵ１１は、プログラム制御により種々の演算処理を実行し、情報処理装置１０全体を制御している。例えば、ＣＰＵ１１は、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）やＢＩＯＳのプログラムに基づく処理を実行する。また、ＣＰＵ１１は、ＯＳ上で実行される各種ドライバ、各種サービス／ユーティリティ、アプリケーション等に基づく処理を実行する。

メインメモリ１２は、ＣＰＵ１１の実行プログラムの読み込み領域として、又は、実行プログラムの処理データを書き込む作業領域として利用される書き込み可能メモリである。メインメモリ１２は、例えば、複数個のＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）チップで構成される。この実行プログラムには、ＯＳ、周辺機器類をハードウェア操作するための各種ドライバ、各種サービス／ユーティリティ、アプリケーションプログラム等が含まれる。

ビデオサブシステム１３は、画像表示に関連する機能を実現するためのサブシステムであり、ビデオコントローラを含んでいる。このビデオコントローラは、ＣＰＵ１１からの描画命令を処理し、処理した描画情報をビデオメモリに書き込むとともに、ビデオメモリからこの描画情報を読み出して、表示部１４に描画データ（表示データ）として出力する。

表示部１４は、例えば、液晶ディスプレイや有機ＥＬディスプレイであり、ビデオサブシステム１３から出力された描画データ（表示データ）に基づく表示画面を表示する。

チップセット２１は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、シリアルＡＴＡ（ＡＴ Ａｔｔａｃｈｍｅｎｔ）、ＳＰＩ（Ｓｅｒｉａｌ Ｐｅｒｉｐｈｅｒａｌ Ｉｎｔｅｒｆａｃｅ）バス、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ）バス、ＰＣＩ－Ｅｘｐｒｅｓｓバス、及びＬＰＣ（Ｌｏｗ Ｐｉｎ Ｃｏｕｎｔ）バスなどのコントローラを備えており複数のデバイスが接続される。例えば、複数のデバイスとして、後述するＢＩＯＳメモリ２２と、記憶部２３と、オーディオシステム２４と、通信部２５と、ＵＳＢコネクタ２６と、エンベデッドコントローラ３１とが含まれる。

ＢＩＯＳメモリ２２は、例えば、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒy）やフラッシュＲＯＭなどの電気的に書き換え可能な不揮発性メモリで構成される。ＢＩＯＳメモリ２２は、ＢＩＯＳ、及びエンベデッドコントローラ３１などを制御するためのシステムファームウェアなどを記憶する。

記憶部２３は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、などを含んで構成される。例えば、記憶部２３は、ＯＳ、各種ドライバ、各種サービス／ユーティリティ、アプリケーションプログラム、及び各種データを記憶する。

オーディオシステム２４は、マイク２４１及びスピーカ２４２が接続され、音データの記録、再生、出力を行う。例えば、マイク２４１及びスピーカ２４２は、情報処理装置１０に内蔵されている。なお、マイク２４１及びスピーカ２４２は、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信またはＵＳＢなどを用いて情報処理装置１０と接続される周辺機器であってもよい。

通信部２５は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）または有線ＬＡＮによりネットワークに接続して、データ通信を行う。通信部２５は、例えば、ネットワークからのデータを受信した際に、データを受信したことを示すイベントトリガを発生する。また、通信部２５は、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信により周辺機器類と通信を行ってもよい。
ＵＳＢコネクタ２６は、ＵＳＢを利用した周辺機器類を接続するためのコネクタである。

撮像部２７は、不図示のレンズ及び撮像素子を含んで構成され、レンズを介して入力される被写体像を撮像して電気信号に変化した撮像データを出力する。例えば、撮像部２７は、表示部１４に対面する方向の所定の範囲（画角）を撮像し、撮像した撮像データを出力する。一例として、ユーザがビデオ会議アプリを使用している際に、表示部１４に対面した位置に存在する当該ユーザを撮像した撮像データを出力する。

キーボード３２は、ユーザの操作を受け付ける複数のキー（操作子の一例）が配列された入力デバイスである。キーボード３２は、図１に示すように、第２筐体１０２の内面に設けられている。キーボード３２は、ユーザの操作により入力された入力情報（例えば、キーボードに対して操作されたキーを示す操作信号）をエンベデッドコントローラ３１へ出力する。

電源回路３３は、例えば、ＤＣ／ＤＣコンバータ、充放電ユニット、ＡＣ／ＤＣアダプタなどを含んで構成されている。例えば、電源回路３３は、ＡＣアダプタ（不図示）などの外部電源又はバッテリ３４から供給される直流電圧を、情報処理装置１０を動作させるために必要な複数の電圧に変換する。また、電源回路３３は、エンベデッドコントローラ３１からの制御に基づいて、情報処理装置１０の各部に電力を供給する。

バッテリ３４は、例えば、リチウムバッテリであり、情報処理装置１０に外部電源から電力供給されている場合に、電源回路３３を介して充電され、情報処理装置１０に外部電源から電力供給されていない場合に、電源回路３３を介して、充電された電力を情報処理装置１０の動作電力として出力する。

センサ３５は、ホールセンサ、加速度センサ、または温度センサなどの各種センサを含んで構成されている。各種センサのそれぞれは、それぞれの検知対象に配置されており、検知信号を出力する。例えば、ホールセンサは、情報処理装置１０が開状態であるか閉状態であるかを検出する際に用いられる。また、加速度センサは、情報処理装置１０の向きや動き、または第１筐体１０１と第２筐体１０２との開き角θを検出するなどを検出する際に用いられる。また、温度センサは、情報処理装置１０の内部温度を検出する際に用いられる。

エンベデッドコントローラ３１は、情報処理装置１０のシステムの状態に関わらず、各種デバイス（周辺装置やセンサ等）を監視して制御するワンチップマイコン（Ｏｎｅ－Ｃｈｉｐ Ｍｉｃｒｏｃｏｍｐｕｔｅｒ）である。エンベデッドコントローラ３１は、不図示のＣＰＵ、ＲＯＭ、ＲＡＭ、複数チャネルのＡ／Ｄ入力端子、Ｄ／Ａ出力端子、タイマ、及びデジタル入出力端子を備える。エンベデッドコントローラ３１のデジタル入出力端子には、例えば、キーボード３２、電源回路３３、及びセンサ３５などが接続されている。エンベデッドコントローラ３１は、キーボード３２からの入力情報（操作信号）や、センサ３５などからのセンサ信号を受け取る。また、エンベデッドコントローラ３１は、電源回路３３などの動作を制御する。

［情報処理装置１０の機能構成］
次に、情報処理装置１０が上述したビデオ会議アプリ及びレビューアプリを実行することにより実現される機能構成について説明する。
図５は、本実施形態に係る情報処理装置１０の機能構成の一例を示すブロック図である。情報処理装置１０は、ＣＰＵ１１が各種プログラムを実行することにより実現される機能構成として処理部１１０を備えている。処理部１１０は、ビデオ会議処理部１１１と、レビュー処理部１２１とを備えている。ビデオ会議処理部１１１は、ビデオ会議アプリを実行することにより実現される機能構成である。レビュー処理部１２１は、レビューアプリを実行することにより実現される機能構成である。ここでは、レビュー処理部１２１について詳しく説明する。レビュー処理部１２１は、キャプチャ部１２２と、表示制御部１２５とを備えている。

キャプチャ部１２２は、ビデオ会議処理部１１１により他の端末装置（情報処理装置）から受信した映像が表示される表示部１４の画面領域のうち当該映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャする。一例として、キャプチャ部１２２は、１０秒ごとにキャプチャし、キャプチャしたキャプチャ画像ファイルを順次に記憶部２３に保存する。

図６は、記憶部２３に記憶されているキャプチャ画像ファイルの一例を示す図である。キャプチャ画像は、キャプチャされる度に静止画ファイルとして保存される。例えば、ファイル名は、キャプチャされた時刻に基づく名称が付与される。なお、ファイル名は、キャプチャ順に００１、００２、００３、・・・などのように昇順にナンバリングされた名称としてもよい。ファイル形式は、ここではＰＮＧを例としているが、これに限定されるものではなく、ＧＩＦ、ＪＰＥＧ、ＢＭＰ等のファイル形式を用いてもよい。また、各キャプチャ画像ファイルには、キャプチャされた時刻を示す時刻情報（タイムスタンプ）が含まれる。

キャプチャ部１２２がキャプチャする画面領域は、表示部１４の全画面領域（デスクトップ画面の全領域）であってもよいし、ビデオ会議アプリのウィンドウ領域（図２及び図３に示すウィンドウＷＶの領域）であってもよい。また、キャプチャ部１２２がキャプチャする画面領域は、ユーザにより指定された画面領域であってもよい。例えば、キャプチャの開始前や途中で、ビデオ会議アプリの映像（資料）の少なくとも一部が含まれるように、キャプチャする領域のサイズ及び位置をユーザが設定できるようにしてもよい。

なお、キャプチャ部１２２がキャプチャする画面領域を、表示部１４の全画面領域（デスクトップ画面の全領域）、ビデオ会議アプリのウィンドウ領域、或いはユーザにより指定された領域とするかは、予め設定されていてもよいし、キャプチャの開始前にユーザが設定または変更できるようにしてもよい。

ここで、デスクトップ画面の全領域がキャプチャする画面領域に設定された場合、レビューアプリ自身のウィンドウ領域（図２及び図３に示すウィンドウＷＲの領域）をキャプチャの対象外に設定することができる。また、ビデオ会議アプリのウィンドウ領域がキャプチャする画面領域に設定された場合には、ビデオ会議アプリのウィンドウが他のアプリケーションのウィンドウで隠れていても、ビデオ会議アプリのウィンドウ領域に表示されている映像をキャプチャすることができる。

また、表示部１４の表示画面に表示される現在の操作位置を示すＵＩ（マウスポインタ、マウスカーソルなど）をキャプチャの対象とするか否かを、ユーザが予め設定可能としてもよい。

また、キャプチャ部１２２は、例えばユーザの操作に応じてキャプチャを開始または終了する。一例として、図２及び図３に示すウィンドウＷＲに、キャプチャを開始または終了する操作ＵＩが表示されてもよい。そして、この操作ＵＩに対するユーザの操作に基づいて、キャプチャ部１２２は、キャプチャを開始または終了してもよい

また、キャプチャ部１２２は、ビデオ会議の開始または終了を自動で検知することにより、キャプチャを開始または終了してもよい。例えば、キャプチャ部１２２は、ビデオ会議アプリがマイク２４１又はスピーカ２４２を占有したことを検知した場合、キャプチャを開始してもよい。

ここで、ビデオ会議アプリがマイク２４１を占有した状態とは、ビデオ会議アプリがマイク２４１の使用を許可されている状態であり、より具体的には、ＯＳによってビデオ会議アプリにマイク２４１の使用権（占有権）が与えられている状態である。例えば、マイク２４１を占有した状態とは、ビデオ会議アプリを用いたビデオ会議が行われているときに、ユーザによるミュート及びミュート解除の入力操作が行われることによって、ビデオ会議アプリ上でマイク２４１の機能がオフからオンに一時的に切り替えられた状態を意味するものではない。また、ビデオ会議アプリがスピーカ２４２を占有した状態とは、ビデオ会議アプリがスピーカ２４２の使用を許可されている状態であり、より具体的には、ＯＳによってビデオ会議アプリにスピーカ２４２の使用権（占有権）が与えられている状態である。

また、キャプチャ部１２２は、ビデオ会議アプリが占有していたマイク２４１又はスピーカ２４２を開放したことを検知した場合、キャプチャを終了してもよい。

ここで、ビデオ会議アプリがマイク２４１を開放した状態とは、ビデオ会議アプリがマイク２４１の使用権を開放した状態であり、より具体的には、ＯＳによってビデオ会議アプリに与えられていたマイク２４１の使用権が開放された状態である。例えば、マイク２４１を開放した状態とは、ビデオ会議アプリを用いたビデオ会議が行われているときに、ユーザによるミュート及びミュート解除の入力操作が行われることによって、ビデオ会議アプリ上でマイク２４１の機能がオンからオフに一時的に切り替えられた状態を意味するものではない。また、ビデオ会議アプリがスピーカ２４２を開放した状態とは、ビデオ会議アプリがスピーカ２４２の使用権を開放した状態であり、より具体的には、ＯＳによってビデオ会議アプリに与えられていたスピーカ２４２の使用権が開放された状態である。

図５に戻り、表示制御部１２５は、ビデオ会議アプリの実行中にキャプチャ部１２２による上記所定時間ごとのキャプチャを継続しながら、キャプチャ部１２２によりキャプチャされた一連のキャプチャ画像ファイルの画像を表示部１４に表示させる。具体的には、表示制御部１２５は、記憶部２３に記憶されているキャプチャ画像ファイルを読み出す。そして、表示制御部１２５は、読み出したキャプチャ画像ファイルのキャプチャ画像を図２及び図３に示すレビューアプリのウィンドウＷＲに表示させる。

例えば、表示制御部１２５は、キャプチャ部１２２によりキャプチャされた一連のキャプチャ画像ファイルのそれぞれをキャプチャ順に対応して選択可能なスライダＳＤ１を表示部１４に表示させる。そして、表示制御部１２５は、当該スライダＳＤ１に対するユーザの操作に応じて選択されたキャプチャ画像ファイルの画像を表示部１４（ウィンドウＷＲ）に表示させる（図３参照）。

［レビュー処理］
次に図７及び図８を参照して、情報処理装置１０のレビュー処理部１２１が実行するレビュー処理の動作を説明する。
図７は、本実施形態に係るレビュー処理の一例を示すフローチャートである。図示するレビュー処理は、例えばレビューアプリの起動とともに開始される。

（ステップＳ１０１）レビュー処理部１２１は、キャプチャを開始するか否かを判定する。例えば、レビュー処理部１２１は、ユーザによりキャプチャを開始する操作が行われた場合、又はビデオ会議アプリがマイク２４１又はスピーカ２４２を占有したことを検知した場合、キャプチャ開始イベントが発生したと判定し（ＹＥＳ）、ステップＳ１０３の処理に進む。一方、レビュー処理部１２１は、キャプチャ開始イベントが発生していないと判定した場合（ＮＯ）、このステップＳ１０１の処理を継続する。

（ステップＳ１０３）レビュー処理部１２１は、所定時間ごと（例えば、１０秒ごと）にキャプチャ処理を実行する。ここで図８を参照してキャプチャ処理について説明する。図８は、本実施形態に係るキャプチャ処理の一例を示すフローチャートである。

（ステップＳ１３１）レビュー処理部１２１は、表示部１４の画面領域のうちキャプチャする画面領域の画像を取り込む。キャプチャする画面領域は、表示部１４の全画面領域（デスクトップ画面の全領域）、ビデオ会議アプリのウィンドウ領域（図２及び図３に示すウィンドウＷＶの領域）、ユーザにより指定された画面領域のうちのいずれかである。いずれの画面領域とするかは、ユーザにより選択されてもよい。

（ステップＳ１３２）レビュー処理部１２１は、ステップＳ１３１において取り込んだ画像のファイル（キャプチャ画像ファイル）を記憶部２３に保存する。そして、図７のステップＳ１０５の処理に進む。

（ステップＳ１０５）レビュー処理部１２１は、記憶部２３に保存されたキャプチャ画像をレビュー対象に追加する。

（ステップＳ１０７）レビュー処理部１２１は、ユーザの操作によりキャプチャ画像を表示させるレビュー指示があったか否かを判定する。レビュー処理部１２１は、レビュー指示があったと判定した場合（ＹＥＳ）、ステップＳ１０９の処理へ進む。一方、レビュー処理部１２１は、レビュー指示がないと判定した場合（ＮＯ）、ステップＳ１１１の処理へ進む。

（ステップＳ１０９）レビュー処理部１２１は、ユーザの操作によりレビュー指示として選択されたキャプチャ画像を表示部１４（図２及び図３に示すレビューアプリのウィンドウＷＲ）に表示させる。レビュー指示としてユーザがキャプチャ画像を選択する操作は、例えば、図３に示すスライダＳＤ１に対する操作である。

（ステップＳ１１１）レビュー処理部１２１は、キャプチャを終了するか否かを判定する。例えば、レビュー処理部１２１は、ユーザによりキャプチャを終了する操作が行われた場合、又はビデオ会議アプリがマイク２４１又はスピーカ２４２を開放したことを検知した場合、キャプチャ終了イベントが発生したと判定し（ＹＥＳ）、キャプチャ処理を継続しないで（キャプチャ処理を終了して）ステップＳ１１３の処理に進む。一方、レビュー処理部１２１は、キャプチャ終了イベントが発生していないと判定した場合（ＮＯ）、ステップＳ１０３に戻り、所定時間ごとのキャプチャ処理を継続する。

（ステップＳ１１３）レビュー処理部１２１は、ユーザによりレビューアプリを終了する操作が行われたか否かを判定する。レビュー処理部１２１は、ユーザによりレビューアプリを終了する操作が行われていないと判定した場合（ＮＯ）、ステップＳ１０７の処理に戻り、レビュー指示に応じてキャプチャ画像を表示させる。一方、レビュー処理部１２１は、ユーザによりレビューアプリを終了する操作が行われたと判定した場合（ＮＯ）、レビューアプリをクローズして、レビュー処理を終了する。

なお、レビュー処理部１２１は、ステップＳ１１１においてキャプチャ終了イベントが発生したと判定した場合（ＹＥＳ）、キャプチャ処理の終了とともに、レビューアプリを終了し、レビュー処理を終了してもよい。

以上説明したように、本実施形態に係る情報処理装置１０は、ネットワークを介して他の端末装置（情報処理装置）から映像及び音声を送受信するビデオ会議アプリ（アプリケーションの一例）を実行する。情報処理装置１０は、ビデオ会議アプリを用いて他の端末装置から受信した映像が表示される表示部１４の画面領域のうち上記の映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイル（キャプチャ画像ファイル）としてキャプチャする。また、情報処理装置１０は、ビデオ会議アプリの実行中に所定時間ごとのキャプチャを継続しながら、キャプチャした一連のキャプチャ画像ファイルのうちの少なくとも一部の画像を表示部１４に表示させる。

これにより、情報処理装置１０は、進行中の会議に参加しながら、会議資料をレビューできる。例えば、情報処理装置１０は、オンラインによるビデオ会議の進行中に、他のユーザ（発表者）が会議で共有した資料をユーザ（参加者）が自身の意思で見返すことができるため、オンラインによるビデオ会議の利便性を向上させることができる。このとき、情報処理装置１０は、自身に保存したキャプチャ画像を用いて自身の表示部１４にのみレビュー表示するため、発表者や他の参加者に気を遣うことがなく、資料を見返すことができる。

例えば、情報処理装置１０は、キャプチャした一連のキャプチャ画像ファイルのそれぞれをキャプチャ順に対応して選択可能なスライダＳＤ１（ユーザインタフェースの一例）を表示部１４に表示させるとともに、当該スライダＳＤ１に対する操作に応じて選択されたキャプチャ画像ファイルの画像を表示部１４に表示させる。

これにより、情報処理装置１０は、他のユーザ（発表者）が会議で共有した資料のうちユーザ（参加者）が見返したいページを容易な操作で選択することができる。

一例として、情報処理装置１０は、表示部１４の全画面領域（デスクトップ画面の全領域）をキャプチャしてもよい。

これにより、情報処理装置１０は、オンラインによるビデオ会議の進行中に、他のユーザ（発表者）が会議で共有した資料を、デスクトップ画面の全領域のキャプチャ画像を用いてユーザ（参加者）が見返すことができる。

なお、情報処理装置１０は、デスクトップ画面の全領域がキャプチャする画面領域に設定された場合、レビューアプリ自身のウィンドウ領域（図２及び図３に示すウィンドウＷＲの領域）をキャプチャの対象外に設定することができる。これにより、情報処理装置１０は、デスクトップ画面の全領域がキャプチャする画面領域に設定されていても、オンラインによるビデオ会議の進行中に、レビューアプリ自身のウィンドウ領域がキャプチャされてしまうことが無い。

また、別の例として、情報処理装置１０は、表示部１４の画面領域のうち、ビデオ会議アプリを用いて他の端末装置から受信した映像が表示されるビデオ会議アプリのウィンドウＷＶの領域をキャプチャしてもよい。

これにより、情報処理装置１０は、オンラインによるビデオ会議の進行中に、他のユーザ（発表者）が会議で共有した資料を、ビデオ会議アプリのウィンドウ領域のキャプチャ画像を用いてユーザ（参加者）が見返すことができる。また、情報処理装置１０は、ビデオ会議アプリのウィンドウＷＶが他のアプリケーションのウィンドウで隠れていても、ビデオ会議アプリのウィンドウ領域に表示されている映像をキャプチャすることができるため、ユーザ（参加者）が後から見返すことができる。

また、別の例として、情報処理装置１０は、表示部１４の画面領域のうち指定された一部の領域をキャプチャしてもよい。

これにより、情報処理装置１０は、オンラインによるビデオ会議の進行中に、他のユーザ（発表者）が会議で共有した資料を、ユーザ（参加者）が指定した画面領域のキャプチャ画像を用いてユーザ（参加者）が見返すことができる。

また、情報処理装置１０は、ビデオ会議アプリがマイク２４１又はスピーカ２４２を占有したことを検知した場合、キャプチャを開始してもよい。

これにより、情報処理装置１０は、ユーザ（参加者）の操作を必要とすることなくビデオ会議アプリの映像を自動的にキャプチャするため、キャプチャのし忘れにより見返すことができないといったことを防止できる。

また、情報処理装置１０は、ビデオ会議アプリがマイク２４１又はスピーカ２４２を開放したことを検知した場合、キャプチャを終了してもよい。

これにより、情報処理装置１０は、ユーザ（参加者）の操作を必要とすることなくビデオ会議が終了すればキャプチャを自動的に終了するため、ビデオ会議の終了後に不要なキャプチャ画像を保存してしまうことを防止することができ、データ量を抑制することができる。

また、本実施形態に係る情報処理装置１０における制御方法は、ビデオ会議アプリを用いて他の端末装置から受信した映像が表示される表示部１４の画面領域のうち上記の映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイル（キャプチャ画像ファイル）としてキャプチャするステップと、ビデオ会議アプリの実行中に所定時間ごとのキャプチャを継続しながら、キャプチャした一連のキャプチャ画像ファイルのうちの少なくとも一部の画像を表示部１４に表示させるステップと、を含む。

これにより、情報処理装置１０は、進行中の会議に参加しながら、会議資料をレビューできる。例えば、情報処理装置１０は、オンラインによるビデオ会議の進行中に、他のユーザ（発表者）が会議で共有した資料をユーザ（参加者）が自身の意思で見返すことができるため、オンラインによるビデオ会議の利便性を向上させることができる。このとき、情報処理装置１０は、自身に保存したキャプチャ画像を用いて自身の表示部１４にのみレビュー表示するため、発表者や他の参加者に気を遣うことがなく、資料を見返すことができる。

＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。
本実施形態では、第１の実施形態で説明したビデオ会議アプリでキャプチャしたキャプチャ画像に基づいて資料のデータファイルを自動で生成する構成について説明する。具体的には、本実施形態に係るレビューアプリは、ビデオ会議アプリの映像から資料のコンテンツ領域を切り出してキャプチャを行い、類似のキャプチャ画像を除外した上で資料のファイルを生成する。コンテンツ領域とは、ビデオ会議アプリのウィンドウＷＶに表示される映像のうち資料のコンテンツ部分の領域のことをいう。

まず、コンテンツ領域の切り出しついて説明する。
図９は、本実施形態に係るコンテンツ領域の切り出しについての説明図である。この図は、図２に示すレビューアプリのウィンドウＷＲの部分を示している。ウィンドウＷＲの領域Ｒ１には、ビデオアプリのウィンドウＷＶの領域がキャプチャされたキャプチャ画像が表示されている。キャプチャ画像のうち資料のコンテンツ領域Ｒ２は、ウィンドウＷＲの領域Ｒ１よりも小さい領域である。そこで、本実施形態では、画像解析することによりビデオ会議アプリの映像からコンテンツ領域Ｒ２を切り出してキャプチャする。切り出したコンテンツ領域Ｒ２のキャプチャ画像が領域Ｒ１の全体に表示され、資料には必要のない部分がウィンドウＷＲに表示されないようになる。これにより、ビデオ会議アプリのウィンドウＷＶとレビューアプリのウィンドウＷＲとの両方をユーザが見る状態ではウィンドウＷＲの表示サイズが小さくなるものの、そのウィンドウＷＲのウィンドウ領域を有効に使え、資料を見やすくすることができる。

図１０は、本実施形態に係る切り出し後のキャプチャ画像の表示例を示す図である。レビューアプリのウィンドウＷＲの領域Ｒ１には、ビデオアプリのウィンドウＷＶに表示されている映像から切り出された資料のコンテンツ領域のキャプチャ画像が表示されている。また、本実施形態では、コンテンツ領域のキャプチャ画像を画像解析することにより、既に保存されているキャプチャ画像と類似するキャプチャ画像はレビュー対象から除外する。すなわち、１つのページに対して１つのキャプチャ画像のみがレビュー対象となる。これにより、本実施形態では、資料の同一ページのキャプチャ画像が重複しないようにすることができ、１つのページに対して１つのキャプチャ画像のみを抽出してレビュー対象とすることができる。

また、図１０に示すレビューアプリのウィンドウＷＲには、１つのページに対して１つのキャプチャ画像のみを抽出してレビュー対象とするモード（以下、「抽出レビューモード」と称する）を有効にするか否かのスイッチＳＷが表示されている。図示する例では、スイッチＳＷは、抽出レビューモードが有効（Ｅｎａｂｌｅ）となっている。スライダＳＤ２を左右に移動させることにより、同一ページのキャプチャ画像が重複せず、１ページずつ切り替わって表示される。また、スライダＳＤ２のスライダバーの下には、抽出レビューモードでレビュー対象となるキャプチャ画像に対応する位置に印（目盛り）が表示されている。なお、スイッチＳＷで抽出レビューモードを無効（Ｄｉｓａｂｌｅ）とした場合には、フォルダ内に保存されているすべてのキャプチャ画像がレビュー対象となる。

また、本実施形態では、１つのページに対して１つのキャプチャ画像のみを集めたデータファイルを生成することができる。

以下、本実施形態に係る情報処理装置の構成ついて詳しく説明する。本実施形態に係る情報処理装置の外観及びハードウェア構成は、図１及び図４に示す構成と同様であり、その説明を省略する。ここでは、第１の実施形態と異なる機能構成について説明する。

図１１は、本実施形態に係る情報処理装置１０Ａの機能構成の一例を示すブロック図である。この図１１において、図５に示す各部に対応する構成には同一の符号を付している。情報処理装置１０Ａは、ＣＰＵ１１が各種プログラムを実行することにより実現される機能構成として処理部１１０Ａを備えている。処理部１１０Ａは、ビデオ会議処理部１１１と、レビュー処理部１２１Ａとを備えている。ビデオ会議処理部１１１は、ビデオ会議アプリを実行することにより実現される機能構成であり、図５に示すビデオ会議処理部１１１と同様の構成である。レビュー処理部１２１Ａは、本実施形態に係るレビューアプリを実行することにより実現される機能構成である。レビュー処理部１２１Ａは、キャプチャ部１２２Ａと、領域検出部１２３Ａと、類似性判定部１２４Ａと、表示制御部１２５Ａと、ファイル生成部１２６Ａとを備えている。

キャプチャ部１２２Ａは、ビデオ会議アプリの映像をキャプチャする際に、領域検出部１２３Ａにより検出されたコンテンツ領域をキャプチャする。

領域検出部１２３Ａは、画像解析を行うことによりビデオ会議アプリの映像から資料のコンテンツ領域を検出する。画像解析の方法としては、エッジ検出などの任意の方法を用いることができる。

類似性判定部１２４Ａは、キャプチャ部１２２Ａによりキャプチャされる度に、今回キャプチャされたキャプチャ画像を以前にキャプチャされたキャプチャ画像と比較して類似性を判定する。画像の類似性の判定には、画像のパターンマッチングなどの任意の判定方法を用いることができる。例えば、類似性判定部１２４Ａは、今回キャプチャされたキャプチャ画像と以前にキャプチャされたキャプチャ画像との類似度を判定し、類似度が所定の閾値以上であると判定した場合、レビュー対象からの除外を示す除外フラグを今回キャプチャされたキャプチャ画像のファイル情報に付与する。

図１２は、本実施形態に係る記憶部２３に記憶されているキャプチャ画像ファイルの一例を示す図である。この図に示す例では、キャプチャ画像ファイルのファイル名、タイムスタンプ、及び除外フラグを示している。例えば、タイムスタンプは、キャプチャ画像ファイルのヘッダ情報に含まれている。除外フラグは、キャプチャ画像ファイルと関連図けられて記憶される。例えば、除外フラグは、デフォルトではレビュー対象から除外しないことを示す「０」が設定されている。類似性判定部１２４Ａは、レビュー対象からの除外するキャプチャ画像ファイルにレビュー対象からの除外を示す除外フラグを付与する場合、除外フラグを「０」から「１」に変更する。

表示制御部１２５Ａは、類似性判定部１２４Ａにより以前にキャプチャされたキャプチャ画像との類似度が所定の閾値以上であると判定されたキャプチャ画像をレビュー対象（表示対象）から除外する。例えば、表示制御部１２５Ａは、記憶部２３に記憶されているキャプチャ画像ファイルのうち除外フラグが付与されていないファイルを読み出す。そして、表示制御部１２５Ａは、読み出したキャプチャ画像ファイルのキャプチャ画像を図１０に示すレビューアプリのウィンドウＷＲに表示させる。

ファイル生成部１２６Ａは、キャプチャ部１２２Ａによりキャプチャされた一連のキャプチャ画像のそれぞれを、キャプチャ順にページごとに割付けた一つのデータファイルとして生成する。例えば、ファイル生成部１２６Ａは、類似性判定部１２４Ａにより以前にキャプチャされたキャプチャ画像との類似度が所定の閾値以上であると判定されキャプチャ画像を除いた残りのキャプチャ画像を、キャプチャ順にページごとに割付けた一つのデータファイルとして生成する。具体的には、ファイル生成部１２６Ａは、記憶部２３に記憶されているキャプチャ画像ファイルのうち除外フラグが付与されていないファイルを読み出し、読み出したファイルのキャプチャ画像をキャプチャ順にページごとに割付けた一つのデータファイルとして生成する。このデータファイルは、資料をページ単位でスライド表示できるため、以下では「スライドファイル」とも称する。

また、ファイル生成部１２６Ａは、ビデオ会議アプリの実行中にキャプチャ部１２２Ａによる所定時間ごとのキャプチャを継続しながら、それまでにキャプチャ済みのキャプチャ画像に基づいてスライドファイルを生成することが可能である。なお、ファイル生成部１２６Ａは、キャプチャの終了後に、フォルダ内に保存されているキャプチャ画像に基づいてスライドファイルを生成することも可能である。

次に、本実施形態に係るレビュー処理部１２１Ａが実行するレビュー処理の動作を説明する。本実施形態に係るレビュー処理は、図７に示すレビュー処理と基本的には同様であるが、ステップＳ１０３のキャプチャ処理の詳細が異なる点と、ステップＳ１０５及びステップＳ１０７において除外フラグが付与されていないキャプチャ画像のみがレビュー対象となる点とが異なる。ここでは、ステップＳ１０３のキャプチャ処理の詳細について、図１３を参照して詳しく説明する。

図１３は、本実施形態に係るキャプチャ処理の一例を示すフローチャートである。
（ステップＳ２３１）レビュー処理部１２１Ａは、画像解析を行うことによりビデオ会議アプリの映像から資料のコンテンツ領域を検出する。

（ステップＳ２３２）レビュー処理部１２１Ａは、ステップＳ２３１において検出されたコンテンツ領域の画像を取り込む。

（ステップＳ２３３）レビュー処理部１２１Ａは、ステップＳ２３２において取り込んだ画像（今回キャプチャされたキャプチャ画像）を記憶部２３に保存されているキャプチャ画像（以前にキャプチャされキャプチャ画像）と比較する。例えば、レビュー処理部１２１Ａは、ステップＳ２３２において取り込んだ画像を、記憶部２３に保存されている除外フラグが付与されていないキャプチャ画像のうち最後にキャプチャされたキャプチャ画像と比較する。なお、レビュー処理部１２１Ａは、ステップＳ２３２において取り込んだ画像を、記憶部２３に保存されている除外フラグが付与されていないキャプチャ画像のすべてと比較してもよい。

（ステップＳ２３４）レビュー処理部１２１Ａは、ステップＳ２３２の比較結果に基づいて、ステップＳ２３２において取り込んだ画像と以前にキャプチャされたキャプチャ画像との類似性を判定する。例えば、レビュー処理部１２１Ａは、ステップＳ２３２において取り込んだ画像と以前にキャプチャされたキャプチャ画像との類似度が所定の閾値以上であるか否かを判定する。レビュー処理部１２１Ａは、類似度が所定の閾値以上であると判定した場合（ＹＥＳ）、ステップＳ２３５の処理に進む。一方、レビュー処理部１２１Ａは、類似度が所定の閾値未満であると判定した場合（ＮＯ）、ステップＳ２３５の処理を行わずにステップＳ２３６の処理に進む。

（ステップＳ２３５）レビュー処理部１２１Ａは、ステップＳ２３２において取り込んだ画像に除外フラグを付与する。例えば、レビュー処理部１２１Ａは、ステップＳ２３２において取り込んだキャプチャ画像ファイルの除外フラグを「１」に設定する。

（ステップＳ２３６）レビュー処理部１２１は、ステップＳ２３２において取り込んだ画像のファイル（キャプチャ画像ファイル）を記憶部２３に保存する。そして、図７のステップＳ１０５の処理に進む。

次に、本実施形態に係るレビュー処理部１２１Ａが実行するスライドファイル生成処理の動作を説明する。
図１４は、本実施形態に係るスライドファイル生成処理の一例を示すフローチャートである。

（ステップＳ３１１）レビュー処理部１２１は、記憶部２３に記憶されているキャプチャ画像ファイルを読み出す。例えば、レビュー処理部１２１は、記憶部２３に記憶されているキャプチャ画像ファイルのうちレビュー対象のファイル（除外フラグが「０」のファイル）を読み出す。

（ステップＳ３１２）レビュー処理部１２１は、ステップＳ３１１において読み出したキャプチャ画像ファイルの画像をキャプチャ順にページごとに割付けた一つのデータファイルを生成する。

（ステップＳ３１３）レビュー処理部１２１は、ステップＳ３１において生成したデータファイルを資料のスライドファイルとして記憶部２３に保存する。

以上説明したように、本実施形態に係る情報処理装置１０Ａは、ビデオ会議アプリを用いて他の端末装置から受信した映像を画像解析することにより当該映像から資料のコンテンツ領域（特定領域の一例）を検出し、表示部１４の画面領域のうち検出されたコンテンツ領域をキャプチャしてもよい。

これにより、情報処理装置１０Ａは、ビデオ会議アプリのウィンドウＷＶとレビューアプリのウィンドウＷＲとの両方をユーザが見る状態ではウィンドウＷＲの表示サイズが小さくなるものの、そのウィンドウＷＲのウィンドウ領域全体に資料を表示することができるため、小さいウィンドウ領域を有効に使え、資料を見やすくすることができる。よって、情報処理装置１０Ａは、オンラインによるビデオ会議の利便性を向上させることができる。

なお、情報処理装置１０Ａは、キャプチャするコンテンツ領域をユーザの操作により指定できるようにしてもよい。これにより、情報処理装置１０Ａは、資料の内容によって画像解析ではコンテンツ領域を正しく検出できない場合に、ユーザが手動でコンテンツ領域を設定できるため、利便性がよい。

また、情報処理装置１０Ａは、キャプチャする度に、今回キャプチャしたキャプチャ画像ファイルの画像を以前にキャプチャしたキャプチャ画像ファイルの画像と比較して類似性を判定する。そして、情報処理装置１０Ａは、以前にキャプチャしたキャプチャ画像ファイルの画像との類似度が所定の閾値以上であると判定したキャプチャ画像ファイルの画像を、表示部１４に表示させるレビュー対象（表示対象）から除外する。

これにより、情報処理装置１０Ａは、同一ページのキャプチャ画像が重複せず、１つのページに対して１つのキャプチャ画像のみがレビュー対象となるため、資料を見返す際のページ送りを楽にすることができる。よって、情報処理装置１０Ａは、オンラインによるビデオ会議の利便性を向上させることができる。

また、情報処理装置１０Ａは、キャプチャした一連のキャプチャ画像ファイルの画像のそれぞれを、キャプチャ順にページごとに割付けた一つのスライドファイル（データファイルの一例）として生成する。

これにより、情報処理装置１０Ａは、ビデオ会議で使用された資料を発表者から入手しなくても、キャプチャ画像から資料のスライドファイルを生成することができるため、利便性がよい。

例えば、情報処理装置１０Ａは、以前にキャプチャしたキャプチャ画像ファイルの画像との類似度が所定の閾値以上であると判定したキャプチャ画像ファイルを一連のキャプチャ画像ファイルから除いた残りのキャプチャ画像ファイルの画像を、キャプチャ順にページごとに割付けた一つのスライドファイルとして生成する。

これにより、情報処理装置１０Ａは、キャプチャ画像から資料のスライドファイルを生成する際に、同一ページが重複しないようにページが切り替わったときの画像を集めてスライドファイルを生成することができるため、利便性がよい。

また、情報処理装置１０Ａは、ビデオ会議アプリの実行中に、所定時間ごとのキャプチャを継続しながら、キャプチャ済みのキャプチャ画像ファイルの画像に基づいて一つのスライドファイルとして生成する。

これにより、情報処理装置１０Ａは、ビデオ会議の途中でも、それまでに表示された資料のページまでのスライドファイルを生成することができるため、利便性がよい。

なお、本実施形態では、キャプチャ部１２２Ａが、ビデオ会議アプリの映像をキャプチャする際に、領域検出部１２３Ａにより検出されたコンテンツ領域をキャプチャする例を説明したが、これに限られるものではない。例えば、キャプチャ部１２２Ａは、コンテンツ領域をキャプチャするのではなく、表示部１４の全画面領域、ビデオ会議アプリのウィンドウ領域、またはユーザにより指定された画面領域をキャプチャし、キャプチャしたキャプチャ画像ファイルに、領域検出部１２３Ａにより検出されたコンテンツ領域を示す情報（例えば、コンテンツ領域を示す矩形情報）を関連付けて記憶部２３に記憶してもよい。そして、類似性判定部１２４Ａは、キャプチャ部１２２Ａにより今回キャプチャされたキャプチャ画像と以前にキャプチャされたキャプチャ画像とのそれぞれからコンテンツ領域を切り出して比較し、類似性を判定してもよい。また、表示制御部１２５Ａは、読み出したキャプチャ画像ファイルのキャプチャ画像からコンテンツ領域を切り出して図１０に示すレビューアプリのウィンドウＷＲに表示させてもよい。また、ファイル生成部１２６Ａは、キャプチャ部１２２Ａによりキャプチャされた一連のキャプチャ画像のそれぞれから切り出されたコンテンツ領域を、キャプチャ順にページごとに割付けた一つのスライドファイル（データファイル）として生成してもよい。

また、キャプチャ部１２２Ａは、静止画のキャプチャに加えて動画をキャプチャしてもよい。例えば、キャプチャ部１２２Ａは、静止画のキャプチャ開始からキャプチャ終了までの期間に対応する期間、静止画のキャプチャとともに、動画をキャプチャしてもよい。また、キャプチャ部１２２Ａは、動画のキャプチャ終了後に、キャプチャした動画から静止画（動画のフレーム画像）をキャプチャしてもよい。そして、ファイル生成部１２６Ａは、動画のキャプチャ終了後に、キャプチャ部１２２Ａにより動画からキャプチャされた静止画のキャプチャ画像に基づいてスライドファイル（データファイル）を生成してもよい。

以上、図面を参照してこの発明の実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。例えば、上記の各実施形態で説明した構成は、任意に組み合わせてもよい。

なお、上記実施形態では、所定時間ごとにキャプチャする例として、１０秒ごとにキャプチャする例を説明したがこれに限定されるものではない。例えば、１秒ごとや１分ごとなどにキャプチャする構成としてもよい。また、このキャプチャするタイミングは、予め設定されていてもよいし、ユーザが任意に設定できるようにしてもよい。

また、情報処理装置１０（１０Ａ）は、表示部１４の画面領域をキャプチャする。そのため、上記実施形態では、キャプチャの対象（レビューアプリの対象）となるアプリケーションとしてビデオ会議アプリを例として説明したが、ビデオ会議アプリの種類は何ら限定されるものではない。また、ビデオ会議用途のアプリケーションに限定されるものではなく、ネットワークを介して他の端末装置と映像を含む通信が可能なアプリケーションに上記実施形態を適用することができる。つまり、キャプチャ対象は、表示部１４に表示されるものであれば、あらゆるアプリケーション及びコンテンツとすることができる。

また、上述した情報処理装置１０（１０Ａ）は、内部にコンピュータシステムを有している。そして、上述した情報処理装置１０（１０Ａ）のそれぞれが備える各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した情報処理装置１０（１０Ａ）のそれぞれが備える各構成における処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。

また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部又は外部に設けられた記録媒体も含まれる。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に情報処理装置１０が備える各構成で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

また、上述した実施形態における情報処理装置１０（１０Ａ）が備える各機能の一部、または全部を、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）等の集積回路として実現してもよい。各機能は個別にプロセッサ化してもよいし、一部、又は全部を集積してプロセッサ化してもよい。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。

また、上述した実施形態では、情報処理装置１０（１０Ａ）がノートＰＣである例を説明したが、デスクトップ型やタブレット型のＰＣであってもよいし、スマートフォンやゲーム機、或いはビデオ会議専用の電子機器などであってもよい。また、撮像部２７は、情報処理装置１０に内蔵されたものに限らず、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）等で接続される周辺機器であってもよい。また、表示部１４は、情報処理装置１０に内蔵されたものに限らず、ＨＤＭＩ（登録商標）またはＵＳＢ等で接続される周辺機器であってもよい。

１０，１０Ａ 情報処理装置、１０１ 第１筐体、１０２ 第２筐体、１０３ ヒンジ機構、１１ ＣＰＵ、１２ メインメモリ、１３ ビデオサブシステム、１４ 表示部、２１ チップセット、２２ ＢＩＯＳメモリ、２３ 記憶部、２４ オーディオシステム、２５ 通信部、２６ ＵＳＢコネクタ、２７ 撮像部、３１ エンベデッドコントローラ、３２ キーボード、３３ 電源回路、３４ バッテリ、３５ センサ、１１０，１１０Ａ 処理部、１１１ ビデオ会議処理部、１２１，１２１Ａ レビュー処理部、１２２，１２２Ａ キャプチャ部、１２３Ａ 領域検出部、１２４Ａ 類似性判定部、１２５，１２５Ａ 表示制御部

Claims (13)

1. ネットワークを介して他の情報処理装置から映像及び音声を送受信するアプリケーションを実行する情報処理装置であって、
   前記アプリケーションを用いて他の情報処理装置から受信した映像が表示される表示部の画面領域のうち前記映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャするキャプチャ部と、
   前記アプリケーションの実行中に前記キャプチャ部による前記所定時間ごとのキャプチャを継続しながら、前記キャプチャ部によりキャプチャされた一連の静止画ファイルのうちの少なくとも一部の画像を前記表示部に表示させる表示制御部と、
   を備える情報処理装置。
2. 前記表示制御部は、
   前記キャプチャ部によりキャプチャされた一連の静止画ファイルのそれぞれをキャプチャ順に対応して選択可能なユーザインタフェースを前記表示部に表示させるとともに、当該ユーザインタフェースに対する操作に応じて選択された静止画ファイルの画像を前記表示部に表示させる、
   請求項１に記載の情報処理装置。
3. 前記キャプチャ部は、
   前記表示部の全画面領域をキャプチャする、
   請求項１または請求項２に記載の情報処理装置。
4. 前記キャプチャ部は、
   前記表示部の画面領域のうち前記映像が表示される前記アプリケーションのウィンドウ領域をキャプチャする、
   請求項１または請求項２に記載の情報処理装置。
5. 前記キャプチャ部は、
   前記表示部の画面領域のうち指定された一部の領域をキャプチャする、
   請求項１または請求項２に記載の情報処理装置。
6. 前記映像を画像解析することにより前記映像から特定領域を検出する領域検出部をさらに備え、
   前記キャプチャ部は、
   前記表示部の画面領域のうち前記領域検出部により検出された特定領域をキャプチャする、
   請求項１または請求項２に記載の情報処理装置。
7. 前記キャプチャ部によりキャプチャされる度に、今回キャプチャされた静止画ファイルの画像を以前にキャプチャされた静止画ファイルの画像と比較して類似性を判定する類似性判定部をさらに備え、
   前記表示制御部は、
   前記類似性判定部により以前にキャプチャされた静止画ファイルの画像との類似度が所定の閾値以上であると判定された静止画ファイルの画像を、前記表示部に表示させる表示対象から除外する、
   請求項１から請求項６のいずれか一項に記載の情報処理装置。
8. 前記キャプチャ部によりキャプチャされた一連の静止画ファイルの画像のそれぞれを、キャプチャ順にページごとに割付けた一つのデータファイルとして生成するファイル生成部、
   をさらに備える請求項１から請求項６のいずれか一項に記載の情報処理装置。
9. 前記キャプチャ部によりキャプチャされる度に、今回キャプチャされた静止画ファイルの画像を以前にキャプチャされた静止画ファイルの画像と比較して類似性を判定する類似性判定部をさらに備え、
   前記ファイル生成部は、
   前記類似性判定部により以前にキャプチャされた静止画ファイルの画像との類似度が所定の閾値以上であると判定された静止画ファイルを前記一連の静止画ファイルから除いた残りの静止画ファイルの画像を、キャプチャ順にページごとに割付けた一つのデータファイルとして生成する、
   請求項８に記載の情報処理装置。
10. 前記ファイル生成部は、
    前記アプリケーションの実行中に前記キャプチャ部による所定時間ごとのキャプチャを継続しながら、前記キャプチャ部によりキャプチャ済みの静止画ファイルの画像に基づいて前記一つのデータファイルを生成する、
    請求項８または請求項９に記載の情報処理装置。
11. 前記キャプチャ部は、
    前記アプリケーションがマイクロフォン又はスピーカを占有したことを検知した場合、前記キャプチャを開始する、
    請求項１から請求項１０のいずれか一項に記載の情報処理装置。
12. 前記キャプチャ部は、
    前記アプリケーションがマイクロフォン又はスピーカを開放したことを検知した場合、前記キャプチャを終了する、
    請求項１１に記載の情報処理装置。
13. ネットワークを介して他の情報処理装置から映像及び音声を送受信するアプリケーションを実行する情報処理装置における制御方法であって、
    キャプチャ部が、前記アプリケーションを用いて他の情報処理装置から受信した映像が表示される表示部の画面領域のうち前記映像の少なくとも一部が含まれる画面領域を、所定時間ごとに静止画ファイルとしてキャプチャするステップと、
    表示制御部が、前記アプリケーションの実行中に前記キャプチャ部による前記所定時間ごとのキャプチャを継続しながら、前記キャプチャ部によりキャプチャされた一連の静止画ファイルのうちの少なくとも一部の画像を前記表示部に表示させるステップと、
    を含む制御方法。

Images