JP2014197813A - Recording program and recording device - Google Patents

Recording program and recording device Download PDF

Info

Publication number
JP2014197813A
JP2014197813A JP2013073470A JP2013073470A JP2014197813A JP 2014197813 A JP2014197813 A JP 2014197813A JP 2013073470 A JP2013073470 A JP 2013073470A JP 2013073470 A JP2013073470 A JP 2013073470A JP 2014197813 A JP2014197813 A JP 2014197813A
Authority
JP
Japan
Prior art keywords
image
conference
cpu
display
mask
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013073470A
Other languages
Japanese (ja)
Inventor
友大 稲垣
Tomohiro Inagaki
友大 稲垣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2013073470A priority Critical patent/JP2014197813A/en
Publication of JP2014197813A publication Critical patent/JP2014197813A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a recording program executed by a recording device for recording data of an image which is displayed in a display section of a meeting apparatus during teleconferencing so that the data of the image can be browsed after teleconferencing in a mode according to a browsing authority of a browsing person, and to provide the recording device.SOLUTION: A CPU of a server receives media data of an image which is displayed on a display of the meeting apparatus participating in teleconferencing. The CPU acquires authority information indicating whether or not a browsing person has a browsing authority for the image based on image data included in the media data (S106). The CPU acquires time information (S109). The CPU specifies a display area where a mask image is displayed in which the image can be hidden when the image is displayed on the display of the meeting apparatus (S110). The CPU associates the media data, mask region, and time information with one another to store them in a third table (S111), and creates the mask image (S113).

Description

本発明は、遠隔会議において会議装置の表示部に表示された画像のデータを記録する為の記録プログラム、及び記録装置に関する。   The present invention relates to a recording program and a recording apparatus for recording image data displayed on a display unit of a conference apparatus in a remote conference.

遠隔会議中に会議装置の表示部に表示されたデータ(例えば、参加者の撮影画像やファイル等のデータ)を、遠隔会議の終了後に、遠隔会議の参加者や非参加者に適切に利用させる為の技術が提案されている。例えば特許文献1では、遠隔会議中に参加者が閲覧可能な電子データを、遠隔会議の終了後に必要に応じて削除することが可能な会議装置が開示されている。具体的には次の通りである。会議装置は、回収が必要であるか否かを示す情報を電子データに対応付け、テーブルに記憶する。会議装置は、遠隔会議の終了後、回収が必要であることを示す情報が対応付けられた電子データを削除する。これによって会議装置は、遠隔会議の終了後、守秘レベルの高い電子データを参加者や非参加者が閲覧することを制限する。   Data displayed on the display unit of the conference device during a remote conference (for example, data such as captured images and files of participants) is appropriately used by participants and non-participants of the remote conference after the remote conference ends. Technology has been proposed. For example, Patent Document 1 discloses a conference device that can delete electronic data that can be viewed by a participant during a remote conference, if necessary, after the remote conference ends. Specifically, it is as follows. The conference device associates information indicating whether or not collection is necessary with electronic data and stores the information in a table. The conference device deletes electronic data associated with information indicating that collection is necessary after the end of the remote conference. As a result, the conference device restricts participants and non-participants from browsing electronic data with a high level of confidentiality after the end of the remote conference.

特開2009−20829号公報JP 2009-20829 A

回収が必要な電子データでも、特定の者(例えば遠隔会議の主催者等)が遠隔会議の終了後に閲覧を望む場合がある。しかしながら特許文献1に記載された会議装置は、回収が必要であることを示す情報が対応付けられた電子データを遠隔会議の終了後に削除する為、削除後は電子データを閲覧できなくなるという問題点がある。   Even with electronic data that needs to be collected, a specific person (for example, a remote conference organizer) may want to view the data after the remote conference ends. However, since the conference apparatus described in Patent Document 1 deletes electronic data associated with information indicating that collection is necessary after the end of the remote conference, the electronic data cannot be browsed after the deletion. There is.

本発明の目的は、遠隔会議中に会議装置の表示部に表示された画像のデータを、閲覧者の閲覧権限に応じた態様で遠隔会議の終了後に閲覧できるように記録する記録装置によって実行される記録プログラム、及び記録装置を提供することである。   An object of the present invention is executed by a recording device that records data of an image displayed on a display unit of a conference device during a remote conference so that the data can be viewed after the end of the remote conference in a mode according to the viewing authority of the viewer. A recording program and a recording apparatus.

本発明の第1態様に係る記録プログラムは、遠隔会議に参加する会議装置の表示部に表示される画像のデータである画像データを少なくとも1つ含むメディアデータを記録する為の記録プログラムであって、前記メディアデータを受信する第1受信ステップと、前記第1受信ステップによって受信された前記メディアデータに含まれる画像データに基づく画像の種別毎の閲覧権限を、前記会議装置毎に特定可能な権限情報を取得する第1取得ステップと、前記画像データに基づく画像が前記会議装置の前記表示部に表示された場合に前記画像を隠蔽することが可能な画像であるマスク画像が表示される表示領域であるマスク領域を、前記第1取得ステップによって取得された前記権限情報に基づいて、前記会議装置毎に特定する特定ステップと、前記第1受信ステップによって前記メディアデータが受信された時刻に対応する時刻情報を取得する第2取得ステップと、前記第1受信ステップによって受信された前記メディアデータを示す情報と、前記特定ステップによって特定された前記マスク領域と、前記マスク領域に対応する会議装置の識別情報と、前記第2取得ステップによって取得された前記時刻情報とを関連付けて記憶部に記憶する記憶ステップと、前記記憶ステップによって前記記憶部に記憶されたメディアデータを示す情報、前記マスク領域、前記識別情報、及び前記時刻情報に基づいて、前記マスク画像を生成する生成ステップと、をコンピュータに実行させる。   A recording program according to a first aspect of the present invention is a recording program for recording media data including at least one image data which is image data displayed on a display unit of a conference device participating in a remote conference. A first receiving step for receiving the media data, and an authority for specifying the browsing authority for each type of image based on the image data included in the media data received by the first receiving step for each conference device A first acquisition step for acquiring information, and a display area in which a mask image, which is an image that can be concealed when an image based on the image data is displayed on the display unit of the conference device, is displayed. A specifying step for specifying a mask area for each conference device based on the authority information acquired in the first acquisition step. A second obtaining step for obtaining time information corresponding to the time at which the media data was received by the first receiving step, information indicating the media data received by the first receiving step, and the specifying step. A storage step of associating and storing the identified mask area, identification information of the conference device corresponding to the mask area, and the time information acquired in the second acquisition step in a storage unit; Based on the information indicating the media data stored in the storage unit, the mask area, the identification information, and the time information, a generation step of generating the mask image is executed by a computer.

第1態様によれば、記録プログラムが実行された場合、メディアデータ、マスク領域、及び時刻情報が関連付けられて記憶部に記憶される。遠隔会議中の画像を議事録画像として会議装置の表示部に表示させる場合、マスク領域で示される領域にマスク画像を表示させることが可能となる為、マスク画像によって特定の画像を隠蔽できる。このため会議装置は、閲覧権限を有さない者が特定の画像を閲覧することを防止できる。このように記録装置は、閲覧権限に応じた態様で遠隔会議の終了後にメディアデータを閲覧できるように、メディアデータを記録できる。   According to the first aspect, when the recording program is executed, the media data, the mask area, and the time information are associated and stored in the storage unit. When an image during a remote conference is displayed on the display unit of the conference apparatus as a minutes image, the mask image can be displayed in the area indicated by the mask area, so that the specific image can be hidden by the mask image. For this reason, the conference apparatus can prevent a person who does not have browsing authority from browsing a specific image. In this way, the recording device can record the media data so that the media data can be browsed after the end of the remote conference in a manner according to the viewing authority.

第1態様において、前記第1取得ステップは、前記第1受信ステップによって異なるメディアデータが受信される度に、前記権限情報を取得してもよい。記録プログラムが実行された場合、記録装置は、異なるメディアデータが受信される度に、受信されたメディアデータに基づく画像に対応するマスク領域を特定し、記憶部に記憶できる。このため記録装置は、受信された全てのメデイアデータに基づく画像について、閲覧権限に応じた態様で遠隔会議の終了後に閲覧できるように、メディアデータを記録できる。   In the first aspect, the authority information may be acquired in the first acquisition step every time different media data is received in the first reception step. When the recording program is executed, the recording apparatus can specify a mask area corresponding to an image based on the received media data and store it in the storage unit every time different media data is received. For this reason, the recording device can record the media data so that the image based on all the received media data can be viewed after the end of the remote conference in a manner corresponding to the viewing authority.

第1態様において、前記遠隔会議への参加を要求する接続要求を、会議装置から受信する第2受信ステップを更に実行し、前記第1取得ステップは、前記第2受信ステップによって前記接続要求が受信されたことに応じて、前記権限情報を取得してもよい。記録プログラムが実行された場合、記録装置は、新たに会議装置が遠隔会議に参加する度にマスク領域を特定し、記憶部に記憶できる。このため記録装置は、遠隔会議に参加する全ての会議装置についての権限情報に応じた態様で遠隔会議の終了後に画像を閲覧できるように、メディアデータを記録できる。   In the first aspect, a second reception step of receiving a connection request for requesting participation in the remote conference from the conference device is further executed, and the first acquisition step receives the connection request by the second reception step. In response to this, the authority information may be acquired. When the recording program is executed, the recording device can specify the mask area every time the conference device newly participates in the remote conference and store it in the storage unit. Therefore, the recording device can record the media data so that the image can be viewed after the remote conference ends in a manner corresponding to the authority information for all conference devices participating in the remote conference.

第1態様において、前記特定ステップは、前記第1受信ステップによって複数のメディアデータが受信された場合に、複数のメディアデータの夫々に含まれる画像データに基づく複数の画像に対応する複数のマスク領域を特定してもよい。記録プログラムが実行された場合、記録装置は、複数のマスク領域を特定することができる。このため、遠隔会議の終了後、複数の画像を会議装置の表示部に表示させて閲覧させる場合でも、複数のマスク領域にマスク画像を表示させることが可能となる為、複数の画像を隠蔽できる。   In the first aspect, the specifying step includes a plurality of mask regions corresponding to a plurality of images based on image data included in each of the plurality of media data when a plurality of media data is received in the first reception step. May be specified. When the recording program is executed, the recording apparatus can specify a plurality of mask areas. For this reason, even when a plurality of images are displayed on the display unit of the conference device and viewed after the end of the remote conference, the mask images can be displayed in a plurality of mask areas, so that the plurality of images can be hidden. .

第1態様において、前記特定ステップは、前記第1受信ステップによって受信された前記メディアデータに含まれる画像データに基づく画像が、前記会議装置の前記表示部に表示された場合の表示位置に応じた前記マスク領域を特定してもよい。記録プログラムが実行された場合、記録装置は、会議装置の夫々の表示部に表示される画像毎にマスク領域を特定し、記憶部に記憶できる。従って、会議装置毎に画像の配置が異なる場合であっても、遠隔会議の終了後に会議装置の表示部に表示させる画像を、マスク画像によって適切に隠蔽できる。   In the first aspect, the specifying step is in accordance with a display position when an image based on the image data included in the media data received in the first receiving step is displayed on the display unit of the conference device. The mask area may be specified. When the recording program is executed, the recording apparatus can specify a mask area for each image displayed on each display unit of the conference apparatus and store the mask area in the storage unit. Therefore, even when the arrangement of images differs for each conference device, the image to be displayed on the display unit of the conference device after the end of the remote conference can be appropriately hidden by the mask image.

第1態様において、前記第1受信ステップによって受信された前記メディアデータに含まれる画像データに基づく画像の表示位置を変更する指示を受け付ける受付ステップを更に実行し、前記特定ステップは、前記受付ステップによって受け付けられた指示に応じて位置が変更された画像に対応するマスク画像のマスク領域を特定してもよい。これによって、会議装置の表示部に表示される画像の配置が変更された場合であっても、配置の変更後の画像をマスク画像によって適切に隠蔽できる。   In the first aspect, a reception step of receiving an instruction to change an image display position based on the image data included in the media data received in the first reception step is further executed, and the specifying step is performed by the reception step. The mask area of the mask image corresponding to the image whose position has been changed according to the received instruction may be specified. Thereby, even when the arrangement of the images displayed on the display unit of the conference apparatus is changed, the image after the arrangement can be appropriately hidden by the mask image.

本発明の第2態様に係る記録装置は、遠隔会議に参加する会議装置の表示部に表示される画像のデータである画像データを少なくとも1つ含むメディアデータを記録する為の記録装置であって、前記メディアデータを受信する第1受信手段と、前記第1受信手段によって受信された前記メディアデータに含まれる画像データに基づく画像の種別ごとの閲覧権限を、前記会議装置毎に特定可能な権限情報を取得する第1取得手段と、前記画像データに基づく画像が前記会議装置の前記表示部に表示された場合に前記画像を隠蔽することが可能な画像であるマスク画像が表示される表示領域であるマスク領域を、前記第1取得手段によって取得された前記権限情報に基づいて、前記会議装置毎に特定する特定手段と、前記第1受信手段によって前記メディアデータが受信された時刻に対応する時刻情報を取得する第2取得手段と、前記第1受信手段によって受信された前記メディアデータを示す情報と、前記特定手段によって特定された前記マスク領域と、前記マスク領域に対応する会議装置の識別情報と、前記第2取得手段によって取得された前記時刻情報とを関連付けて記憶部に記憶する第1記憶手段と、前記第1記憶手段によって前記記憶部に記憶されたメディアデータを示す情報、前記マスク領域、前記識別情報、及び前記時刻情報に基づいて、前記マスク画像を生成する生成手段とを備えている。第2態様によれば、第1態様と同様の効果を奏することができる。   A recording apparatus according to a second aspect of the present invention is a recording apparatus for recording media data including at least one image data which is image data displayed on a display unit of a conference apparatus participating in a remote conference. , A first receiving means for receiving the media data, and an authority for specifying the browsing authority for each type of image based on the image data included in the media data received by the first receiving means for each conference device A first acquisition means for acquiring information, and a display area in which a mask image, which is an image that can be concealed when an image based on the image data is displayed on the display unit of the conference apparatus, is displayed. And identifying means for identifying each of the conference devices based on the authority information acquired by the first acquisition means, and the first receiving means Second acquisition means for acquiring time information corresponding to the time when the media data was received, information indicating the media data received by the first reception means, the mask area specified by the specification means, A first storage unit that stores the identification information of the conference device corresponding to the mask area and the time information acquired by the second acquisition unit in association with each other in the storage unit, and the first storage unit stores the identification information in the storage unit. And generating means for generating the mask image based on information indicating the stored media data, the mask area, the identification information, and the time information. According to the 2nd aspect, there can exist an effect similar to a 1st aspect.

遠隔会議システム1の概要、サーバ11および会議装置15の電気的構成を示す図である。1 is a diagram showing an overview of a remote conference system 1 and an electrical configuration of a server 11 and a conference device 15. 表示画像371を示す図である。It is a figure which shows the display image 371. FIG. 表示画像3711を示す図である。It is a figure which shows the display image 3711. FIG. 表示画像372を示す図である。It is a figure which shows the display image 372. FIG. 第1テーブル241を示す図である。It is a figure which shows the 1st table 241. FIG. 第2テーブル242を示す図である。It is a figure which shows the 2nd table 242. FIG. 第3テーブル243を示す図である。It is a figure which shows the 3rd table 243. メイン処理のフローチャートである。It is a flowchart of a main process. メイン処理のフローチャートであって、図8の続きである。It is a flowchart of a main process, Comprising: FIG. 8 is a continuation. メイン処理のフローチャートであって、図9の続きである。FIG. 9 is a flowchart of the main process, which is a continuation of FIG. 権限取得処理のフローチャートである。It is a flowchart of an authority acquisition process. 記録処理のフローチャートである。It is a flowchart of a recording process.

図1を参照し、遠隔会議システム1について説明する。遠隔会議システム1は、遠隔拠点間で遠隔会議を行うためのシステムである。遠隔会議システム1は、サーバ11および会議装置12、13、14(以下、総称して「会議装置15」ともいう。)を備える。サーバ11および会議装置15は、ネットワーク20を介して通信可能に接続する。サーバ11の例として、多地点接続装置(Multi-point Control Unit、MCU)が挙げられる。会議装置15の例としてPCが挙げられる。   The remote conference system 1 will be described with reference to FIG. The remote conference system 1 is a system for conducting a remote conference between remote bases. The remote conference system 1 includes a server 11 and conference devices 12, 13, and 14 (hereinafter collectively referred to as “conference device 15”). The server 11 and the conference apparatus 15 are connected via the network 20 so that they can communicate with each other. An example of the server 11 is a multipoint connection unit (MCU). An example of the conference device 15 is a PC.

会議装置15は、遠隔会議時、複数の種別のメディアデータ(以下、単に「メディア」という。)をサーバ11に送信する。複数の種別のメディアとして、撮影画像メディア、共有資料メディア、及び、チャットメディアが挙げられる。撮影画像メディアは、会議装置15のカメラ361によって撮影された画像データを1以上含む。共有資料メディアは、会議装置15のHDD24に記憶された共有資料の画像データを1以上含む。チャットメディアは、チャット時にキーボード362を介して入力されるテキストを含む画像(チャット画像)のデータを1以上含む。   The conference device 15 transmits a plurality of types of media data (hereinafter simply referred to as “media”) to the server 11 during a remote conference. Examples of the plurality of types of media include photographed image media, shared material media, and chat media. The captured image media includes one or more image data captured by the camera 361 of the conference apparatus 15. The shared material medium includes one or more pieces of shared material image data stored in the HDD 24 of the conference apparatus 15. The chat media includes one or more data of images (chat images) including text input via the keyboard 362 during the chat.

サーバ11は、会議装置15から受信したメディアに含まれる画像データに基づく画像を合成し、表示画像を作成する。サーバ11は、ネットワーク20を介して会議装置15に表示画像を送信する。会議装置15は、受信した表示画像をディスプレイ37に表示する。なお以下、メディアに含まれる画像データに基づく画像を、単に「メディアに基づく画像」と言い換える。   The server 11 synthesizes images based on the image data included in the media received from the conference device 15 and creates a display image. The server 11 transmits a display image to the conference device 15 via the network 20. The conference device 15 displays the received display image on the display 37. Hereinafter, an image based on image data included in a medium is simply referred to as “image based on media”.

図2は、会議装置15のディスプレイ37に表示された表示画像の一例である表示画像371を示す。表示画像371には、撮影画像メディアに基づく撮影画像のウィンドウ41、共有資料メディアに基づく共有資料のウィンドウ42、及び、チャットメディアに基づくチャット画像のウィンドウ43が含まれる。会議装置15のユーザは、撮影画像のウィンドウ41を閲覧することで、他の会議装置15の他のユーザの様子を認識できる。またユーザは、共有資料のウィンドウ42を閲覧することで、他のユーザとの間で共有資料を参照しながら遠隔会議を行うことができる。またユーザは、チャット画像のウィンドウ43を閲覧することで、他のユーザとチャットを行うことができる。   FIG. 2 shows a display image 371 that is an example of a display image displayed on the display 37 of the conference apparatus 15. The display image 371 includes a captured image window 41 based on the captured image media, a shared material window 42 based on the shared material media, and a chat image window 43 based on the chat media. The user of the conference apparatus 15 can recognize the state of the other users of the other conference apparatuses 15 by browsing the window 41 of the captured image. In addition, the user can conduct a remote conference while browsing the shared material window 42 by referring to the shared material. Also, the user can chat with other users by browsing the chat image window 43.

なお、表示画像371の夫々のウィンドウ41、42、43は固定的でなく、会議装置15から送信されるメディアの種別や数に応じて変化する。例えは、会議装置12、13、14の夫々から撮影画像メディアのみが送信され、共有資料メディア及びチャットメディアが送信されない場合、サーバ11は、ディスプレイ37の表示領域を横方向に3分割した夫々の領域に、3つの撮影画像のウィンドウの夫々を並べた表示画像を作成する。   Note that the windows 41, 42, and 43 of the display image 371 are not fixed, and change according to the type and number of media transmitted from the conference device 15. For example, when only the captured image media is transmitted from each of the conference devices 12, 13, and 14 and the shared material media and the chat media are not transmitted, the server 11 displays each of the display areas of the display 37 divided into three in the horizontal direction. A display image in which each of the three captured image windows is arranged in the region is created.

また、会議装置12、13の間でのみチャットが行われる場合、会議装置12、13に送信する表示画面371には、チャット画像のウィンドウ43が含められるが、チャットに参加していない会議装置14に送信する表示画像には、チャット画像のウィンドウ43が含められない。このため会議装置14のディスプレイ37には、図3に示すように、チャット画像のウィンドウ43が含まれない表示画像3711が表示される。図2の表示画像371と比較して、撮影画像のウィンドウ41のレイアウトが変更され、共有資料のウィンドウ42が大きくなっている。更に、会議装置15は、撮影画像のウィンドウ41、共有資料のウィンドウ42、及びチャット画像のウィンドウ43を、会議装置15に対する入力操作に基づいて、入力操作に対応する位置に移動させる。   When the chat is performed only between the conference apparatuses 12 and 13, the display screen 371 transmitted to the conference apparatuses 12 and 13 includes the chat image window 43, but the conference apparatus 14 not participating in the chat. The chat image window 43 is not included in the display image transmitted to. Therefore, as shown in FIG. 3, a display image 3711 that does not include the chat image window 43 is displayed on the display 37 of the conference apparatus 14. Compared with the display image 371 of FIG. 2, the layout of the window 41 of the photographed image is changed, and the window 42 of the shared material is enlarged. Further, the conference apparatus 15 moves the captured image window 41, the shared material window 42, and the chat image window 43 to positions corresponding to the input operation based on the input operation to the conference apparatus 15.

またサーバ11は、遠隔会議中の表示画像を遠隔会議の終了後に閲覧可能なように、メディア及びメディアに関連する情報を記憶できる。例えばサーバ11は、遠隔会議の終了後、図2で示される遠隔会議中の表示画像371を、会議装置15に提供できる。会議装置15は、提供された表示画像をディスプレイ37に表示させることによって、遠隔会議中の履歴情報(議事録)として表示画像を利用できる。以下、遠隔会議後に会議装置15に提供される表示画像を「議事録画像」ともいう。   Further, the server 11 can store the media and information related to the media so that the display image during the remote conference can be browsed after the remote conference ends. For example, the server 11 can provide the conference apparatus 15 with the display image 371 during the remote conference shown in FIG. The conference apparatus 15 can use the display image as history information (minutes) during the remote conference by displaying the provided display image on the display 37. Hereinafter, the display image provided to the conference device 15 after the remote conference is also referred to as a “minute image”.

更にサーバ11は、遠隔会議の終了後に会議装置15に提供する議事録画像に含まれる撮影画像、共有資料、及びチャット画像の閲覧の許否を、会議装置15毎に設定できる。例えばサーバ11は、議事録画像のうち共有資料の閲覧を、会議装置12、14に対して許可し、会議装置13に対して禁止できる。サーバ11は、画像の閲覧を禁止した場合、閲覧を禁止する画像にマスク画像を重ねた議事録画像を、遠隔会議の終了後に会議装置15に提供する。   Further, the server 11 can set permission for browsing of photographed images, shared materials, and chat images included in the minutes image provided to the conference device 15 after the end of the remote conference for each conference device 15. For example, the server 11 can permit the conference devices 12 and 14 to browse the shared material in the minutes image and prohibit the conference device 13. When the browsing of the image is prohibited, the server 11 provides the conference device 15 with the minutes image obtained by superimposing the mask image on the image for which browsing is prohibited.

例えば、共有資料の閲覧が会議装置13に対して禁止されている場合を例に挙げる。図4は、遠隔会議の終了後、会議装置13に提供される表示画像372を示している。共有資料の閲覧が禁止されている為、共有資料のウィンドウ42にマスク画像44が重ねて表示される。マスク画像44は、単色(例えば黒色)で塗り潰された矩形状の画像である。共有資料のウィンドウ42にマスク画像44が重ねて表示された場合、共有資料は見えなくなる。このようにしてサーバ11は、会議装置13のユーザに共有資料が閲覧されることを禁止できる。   For example, a case where browsing of shared materials is prohibited for the conference apparatus 13 will be described as an example. FIG. 4 shows a display image 372 provided to the conference device 13 after the end of the remote conference. Since browsing of the shared material is prohibited, the mask image 44 is displayed in an overlapping manner on the shared material window 42. The mask image 44 is a rectangular image filled with a single color (for example, black). When the mask image 44 is superimposed on the shared material window 42, the shared material becomes invisible. In this manner, the server 11 can prohibit the user of the conference device 13 from browsing the shared material.

また例えば、共有資料の閲覧が会議装置14に対して禁止されている場合を例に挙げる。この場合、図3に示す表示画像3711のうち共有資料のウィンドウ42にマスク画像が重ねられた表示画像が、議事録画像として会議装置14に提供される。このようにサーバ11は、会議装15毎に表示画像のレイアウトが異なる場合であっても、夫々の表示画像のレイアウトに応じたマスク画像によって、特定の画像が閲覧されることを適切に禁止できる。   Further, for example, a case where browsing of the shared material is prohibited for the conference apparatus 14 is taken as an example. In this case, a display image in which a mask image is superimposed on the shared material window 42 in the display image 3711 shown in FIG. 3 is provided to the conference apparatus 14 as a minutes image. As described above, even if the layout of the display image is different for each conference device 15, the server 11 can appropriately prohibit the browsing of a specific image by the mask image corresponding to the layout of each display image. .

サーバ11の電気的構成について説明する。サーバ11は、サーバ11の制御を司るCPU21を備える。CPU21は、ROM22、RAM23、ハードディスクドライブ(HDD)24、通信インタフェース(以下、「通信I/F」という。)25、およびドライブ装置26と電気的に接続する。ROM22には、ブートプログラムやBIOS等が記憶される。RAM23には、タイマやカウンタ、一時的なデータが記憶される。HDD24には、CPU21のプログラム(記録プログラム)が記憶される。またHDD24には、第1テーブル241(図5参照、後述)、第2テーブル242(図6参照、後述)、及び第3テーブル(図4参照、後述)が記憶される。なお、HDD24は、コンピュータが読み取り可能な記憶媒体であれば、他の構成であってもよい。通信I/F25は、ネットワーク20を介して会議装置15と通信を行う。ドライブ装置26は、記憶媒体261に記憶された情報を読み出す。例えばサーバ11のセットアップ時、記憶媒体261に記憶された記録プログラムは、ドライブ装置26によって読み出され、HDD24に記憶される。記憶媒体261は、光学メディアや半導体メモリ等のコンピュータが読み取り可能な記憶媒体である。なお、コンピュータが読み取り可能な記録媒体は、一時的に伝送される信号を含まなくてもよい。コンピュータ読み取り可能な記録媒体は、非一時的な記録媒体であっても良い。非一時的な記録媒体は、一時的な信号を含まない。非一時的な記録媒体は、情報を記憶する期間に関わらず、情報を記録可能な記録媒体であれば良い。   The electrical configuration of the server 11 will be described. The server 11 includes a CPU 21 that controls the server 11. The CPU 21 is electrically connected to the ROM 22, RAM 23, hard disk drive (HDD) 24, communication interface (hereinafter referred to as “communication I / F”) 25, and drive device 26. The ROM 22 stores a boot program, BIOS, and the like. The RAM 23 stores a timer, a counter, and temporary data. The HDD 24 stores a program (recording program) for the CPU 21. The HDD 24 stores a first table 241 (see FIG. 5, described later), a second table 242 (see FIG. 6, described later), and a third table (see FIG. 4, described later). The HDD 24 may have another configuration as long as it is a computer-readable storage medium. The communication I / F 25 communicates with the conference device 15 via the network 20. The drive device 26 reads information stored in the storage medium 261. For example, when the server 11 is set up, the recording program stored in the storage medium 261 is read by the drive device 26 and stored in the HDD 24. The storage medium 261 is a computer-readable storage medium such as an optical medium or a semiconductor memory. Note that a computer-readable recording medium may not include a temporarily transmitted signal. The computer-readable recording medium may be a non-transitory recording medium. A non-temporary recording medium does not include a temporary signal. The non-temporary recording medium may be any recording medium that can record information regardless of the period in which the information is stored.

なおサーバ11のCPU21は、ネットワーク20を介して記録プログラムを伝送信号として受信し、HDD24に記憶してもよい。この場合、記録プログラムは、ネットワーク20を介して接続されるサーバ(図示外)が備えるHDDなどの記憶媒体に記憶される。   The CPU 21 of the server 11 may receive a recording program as a transmission signal via the network 20 and store it in the HDD 24. In this case, the recording program is stored in a storage medium such as an HDD provided in a server (not shown) connected via the network 20.

会議装置15の電気的構成について説明する。会議装置15は、会議装置15の制御を司るCPU31を備えている。CPU31は、ROM32、RAM33、HDD34、通信I/F35、外部インタフェース(以下、「外部I/F」という。)36、ディスプレイ37、スピーカ38、およびマイク39と電気的に接続する。ROM32には、ブートプログラムやBIOS等が記憶される。RAM33には、タイマやカウンタ、一時的なデータが記憶される。HDD34には、CPU31の制御プログラムが記憶される。通信I/F35は、ネットワーク20を介してサーバ11と通信を行う。外部I/F36には、カメラ361およびキーボード362を接続することができる。   The electrical configuration of the conference apparatus 15 will be described. The conference device 15 includes a CPU 31 that controls the conference device 15. The CPU 31 is electrically connected to the ROM 32, RAM 33, HDD 34, communication I / F 35, external interface (hereinafter referred to as “external I / F”) 36, display 37, speaker 38, and microphone 39. The ROM 32 stores a boot program, BIOS, and the like. The RAM 33 stores timers, counters, and temporary data. The HDD 34 stores a control program for the CPU 31. The communication I / F 35 communicates with the server 11 via the network 20. A camera 361 and a keyboard 362 can be connected to the external I / F 36.

図5を参照し、第1テーブル241について説明する。第1テーブル241は、会議ID、ユーザID、役割、撮影画像メディアの名称及び撮影画像の表示領域、共有資料メディアの名称及び共有資料の表示領域、及び、チャットメディアの名称及びチャット画像の表示領域を記憶する。会議IDは、遠隔会議を識別する識別情報である。ユーザIDは、対応する会議IDで識別される遠隔会議に参加する会議装置15を識別する識別情報である。役割は、対応するユーザIDで識別される会議装置15を使用するユーザに割り当てられた、遠隔会議における役割を示す。役割として、例えば、「議長」「発表者」「参加者」の何れかが記憶される。   The first table 241 will be described with reference to FIG. The first table 241 includes a conference ID, a user ID, a role, a photographed image media name and a photographed image display area, a shared document medium name and a shared document display area, and a chat media name and a chat image display area. Remember. The conference ID is identification information for identifying the remote conference. The user ID is identification information for identifying the conference device 15 participating in the remote conference identified by the corresponding conference ID. The role indicates a role in the remote conference assigned to the user who uses the conference device 15 identified by the corresponding user ID. As the role, for example, any one of “chairperson”, “presenter”, and “participant” is stored.

撮影画像の表示領域、共有資料の表示領域、及び、チャット画像の表示領域は、夫々、撮影画像、共有資料、及び、チャット画像のウィンドウが表示されるディスプレイ37上の領域のうち、左下及び右上の頂点の座標情報を示す。なお、図5の場合、3つの撮影画像メディアの名称「s1,s2,s3」が記憶されている為、撮影画像の表示領域として、3つの表示領域((x9,xa)(xb,xc)(名称s1の撮影画像の表示領域)、(y9,ya)(yb,yc)(名称s2の撮影画像の表示領域)、(z9,za)(zb,zc)(名称s3の撮影画像の表示領域))が記憶されている。   The captured image display area, the shared material display area, and the chat image display area are the lower left and upper right areas of the display 37 on which the captured image, shared material, and chat image windows are displayed, respectively. Indicates the coordinate information of the vertex. In the case of FIG. 5, since the names “s1, s2, s3” of the three photographed image media are stored, three display areas ((x9, xa) (xb, xc) are displayed as the photographed image display areas. (Display area of the photographed image with name s1), (y9, ya) (yb, yc) (Display area of the photographed image with name s2), (z9, za) (zb, zc) (Display of the photographed image with name s3) Area)) is stored.

第1テーブル241は、会議装置15に送信する表示画像に関連する情報を記憶する。図5の第1テーブル241は、図2の表示画像371、及び図3の表示画像3711に対応する。CPU51は、第1テーブル241に基づき、会議装置12、13に対して送信する表示画像371(図2参照)を作成し、会議装置14に対して送信する表示画像3711(図3参照)を作成する。表示画像371、3711では、撮影画像のウィンドウ及び共有資料のウィンドウのレイアウトが異なる。また、表示画像371にはチャット画像のウィンドウが含まれるのに対し、表示画像3711にはチャット画像のウィンドウが含まれない。このため第1テーブル241では、ユーザID12、13に対応する撮影画像及び共有資料の表示領域と、ユーザID14に対応する撮影画像及び共有資料の表示領域とが異なっている。また、ユーザID12,13に対してチャット画像の名称及び表示領域が対応付けられるのに対し、ユーザID14には、チャット画像の名称及び表示領域が対応付けられない。   The first table 241 stores information related to the display image transmitted to the conference device 15. The first table 241 in FIG. 5 corresponds to the display image 371 in FIG. 2 and the display image 3711 in FIG. Based on the first table 241, the CPU 51 creates a display image 371 (see FIG. 2) to be transmitted to the conference apparatuses 12 and 13, and creates a display image 3711 (see FIG. 3) to be transmitted to the conference apparatus 14. To do. The display images 371 and 3711 have different layouts for the captured image window and the shared material window. The display image 371 includes a chat image window, whereas the display image 3711 does not include a chat image window. Therefore, in the first table 241, the display area for the captured image and the shared material corresponding to the user IDs 12 and 13 is different from the display area for the captured image and the shared material corresponding to the user ID 14. In addition, the chat image name and display area are associated with the user IDs 12 and 13, whereas the chat image name and display area are not associated with the user ID 14.

図6を参照し、第2テーブル242について説明する。第2テーブル242は、レベルテーブル2421及び権限テーブル2422を含む。レベルテーブル2421は、役割及びレベルを記憶する。役割として、「議長」「発表者」「参加者」「非参加者」が記憶される。レベルは、対応する役割のユーザによって使用される会議装置15に許可される、メディアの閲覧権限の程度を示す。図6の場合、「議長」「発表者」「参加者」「非参加者」の順にレベルが設定され、「議長」が最も閲覧権限が高く、「非参加者」が最も閲覧権限が低い。   The second table 242 will be described with reference to FIG. The second table 242 includes a level table 2421 and an authority table 2422. The level table 2421 stores roles and levels. “Chairman”, “presenter”, “participant”, and “non-participant” are stored as roles. The level indicates the degree of media viewing authority permitted to the conference device 15 used by the user of the corresponding role. In the case of FIG. 6, levels are set in the order of “chairperson”, “presenter”, “participant”, and “nonparticipant”, “chairperson” has the highest viewing authority, and “nonparticipant” has the lowest viewing authority.

権限テーブル2422は、メディアの種別及び閲覧権限を記憶する。メディアの種別として、「撮影画像」「共有資料」「チャット」が記憶される。閲覧権限は、対応する種別の画像を閲覧可能な役割を示す。図6の場合、「撮影画像」「共有資料」「チャット」の夫々の種別に対し、「参加者以上」「発表者以上」「任意」の夫々が対応付けられている。閲覧権限が「参加者以上」である場合、レベルが「参加者」以上である役割「議長」「発表者」「参加者」のユーザによって使用される会議装置15に対して、画像の閲覧が許可され、役割「非参加者」のユーザによって使用される会議装置15に対して、画像の閲覧が禁止されることを示す。閲覧権限が「発表者以上」である場合、レベルが「発表者」以上である役割「議長」「発表者」のユーザによって使用される会議装置15に対して、画像の閲覧が許可され、役割「参加者」「非参加者」のユーザによって使用される会議装置15に対して、画像の閲覧が禁止されることを示す。閲覧権限が「任意」である場合、第1テーブル241のユーザIDのうち、対応する名称及び表示領域が記憶されたユーザIDの会議装置15に対して、画像の閲覧が許可され、第1テーブル241のユーザIDのうち、対応する名称及び表示領域が記憶されていないユーザIDの会議装置15に対して、画像の閲覧が禁止されることを示す。   The authority table 2422 stores media types and browsing authorities. As the media type, “photographed image”, “shared material”, and “chat” are stored. The viewing authority indicates a role capable of viewing a corresponding type of image. In the case of FIG. 6, “participant or higher”, “presenter or higher”, and “arbitrary” are associated with each type of “photographed image”, “shared material”, and “chat”. When the viewing authority is “participant or higher”, the image can be viewed on the conference device 15 used by the users of the roles “chairman”, “presenter”, and “participant” whose level is “participant” or higher. This indicates that browsing of images is prohibited for the conference apparatus 15 that is permitted and used by the user of the role “non-participant”. When the viewing authority is “presenter or higher”, image browsing is permitted to the conference device 15 used by the users of the roles “chairman” and “presenter” whose level is “presenter” or higher, and the role This indicates that browsing of images is prohibited for the conference device 15 used by users of “participants” and “non-participants”. When the viewing authority is “arbitrary”, image browsing is permitted to the conference device 15 having the user ID in which the corresponding name and display area are stored among the user IDs of the first table 241, and the first table. Of the user IDs 241, viewing of images is prohibited for the conference device 15 having a user ID for which the corresponding name and display area are not stored.

なお、図6では、1つの第2テーブル242が示されているが、実際には、会議ID毎に異なる第2テーブル242が作成される。即ち、実行される遠隔会議毎に異なる閲覧権限が設定されることになる。また詳細は後述するが、第2テーブル242に記憶される情報は、遠隔会議に参加する会議装置15のうち、議長を担当するユーザによって使用される会議装置15からサーバ11に送信される。   In FIG. 6, one second table 242 is shown, but actually, a different second table 242 is created for each conference ID. That is, a different browsing authority is set for each remote conference to be executed. Although details will be described later, the information stored in the second table 242 is transmitted to the server 11 from the conference device 15 used by the user in charge of the chairman among the conference devices 15 participating in the remote conference.

図7を参照し、第3テーブル243について説明する。第3テーブル243は、マスク画像を作成する為、及び、遠隔会議中の表示画像を議事録画像として閲覧可能とする為に記憶されるテーブルである。図7は、「0:00:00」「0:20:41」「0:35:27」の夫々の時刻に作成された3つの第3テーブル2431、2432、2433を示している。第3テーブル2431、2432、2433は、夫々の時刻における情報を記憶しており、全てHDD24に記憶されている。   The third table 243 will be described with reference to FIG. The third table 243 is a table stored in order to create a mask image and to allow a display image during a remote conference to be viewed as a minutes image. FIG. 7 shows three third tables 2431, 2432, and 2433 created at times “0:00:00”, “0:20:41”, and “0:35:27”. The third tables 2431, 2432, 2433 store information at each time, and are all stored in the HDD 24.

第3テーブル243には、時刻情報、メディアの種別、名称、ユーザID毎の許否情報、及び、ユーザID毎の表示領域(マスク領域)が記憶される。時刻情報は、第3テーブル243が作成された時刻に対応する情報である。なお時刻情報で示される時刻は、会議装置15からメディアを受信した時刻も表している。許否情報は、対応するユーザIDで識別される会議装置15に対して、対応する種別の画像の閲覧を許可するか禁止するかを示す情報である。表示領域(マスク領域)は、対応する種別のメディアが表示される表示領域、又は、マスク画像44(図4参照)が表示されるマスク領域(後述)の左下及び右上の頂点の座標情報を示す。   The third table 243 stores time information, media type, name, permission information for each user ID, and display area (mask area) for each user ID. The time information is information corresponding to the time when the third table 243 is created. The time indicated by the time information also represents the time when the media is received from the conference device 15. The permission / refusal information is information indicating whether the conference device 15 identified by the corresponding user ID is permitted or prohibited from browsing the corresponding type of image. The display area (mask area) indicates coordinate information of the lower left and upper right vertices of a display area where a corresponding type of media is displayed or a mask area (described later) where a mask image 44 (see FIG. 4) is displayed. .

図8から図12を参照し、サーバ11のCPU21によって実行されるメイン処理及び記録処理について説明する。メイン処理は、サーバ11の電源がONされた場合に、HDD24に記憶された記録プログラムをCPU21が実行することによって開始される。記憶処理は、メイン処理のS55(図9参照)で、HDD24に記憶された記録プログラムをCPU21が実行することによって開始される。メイン処理及び記憶処理は並列して実行される。   A main process and a recording process executed by the CPU 21 of the server 11 will be described with reference to FIGS. The main process is started when the CPU 21 executes a recording program stored in the HDD 24 when the server 11 is powered on. The storage process is started when the CPU 21 executes the recording program stored in the HDD 24 in S55 of the main process (see FIG. 9). The main process and the storage process are executed in parallel.

図8を参照し、メイン処理について説明する。CPU21は、会議装置15から接続要求データを受信したか判断する(S11)。接続要求データは、CPU21が遠隔会議への参加を要求する入力操作を受け付けた場合に、会議装置15からサーバ11に送信される。接続要求データは、会議装置15のユーザIDと、参加を要求する遠隔会議の会議IDを含む。CPU21は、接続要求データを受信したと判断した場合(S11:YES)、接続要求データに含まれる会議IDが第1テーブル241に記憶されているか判断する。接続要求データに含まれる会議IDが第1テーブル241に記憶されていない場合、CPU21は、接続要求データに含まれる会議ID及びユーザIDを対応付けて、第1テーブル241に記憶する。CPU21は、最初に会議IDを第1テーブル241に記憶した場合、役割として「議長」を対応付けて記憶する(S12)。CPU21は、接続要求データを送信した会議装置15とのセッションを確立させ、接続状態とすることで、接続要求データを送信した会議装置15との間で遠隔会議を開始する(S13)。なおこの時点では、接続要求データを送信した会議装置15のみ遠隔会議に参加していることになる。   The main process will be described with reference to FIG. The CPU 21 determines whether connection request data has been received from the conference device 15 (S11). The connection request data is transmitted from the conference device 15 to the server 11 when the CPU 21 receives an input operation requesting participation in the remote conference. The connection request data includes the user ID of the conference device 15 and the conference ID of the remote conference that requests participation. When the CPU 21 determines that the connection request data has been received (S11: YES), the CPU 21 determines whether the conference ID included in the connection request data is stored in the first table 241. When the conference ID included in the connection request data is not stored in the first table 241, the CPU 21 stores the conference ID and the user ID included in the connection request data in association with each other in the first table 241. When the conference ID is first stored in the first table 241, the CPU 21 stores “chairperson” in association with the role (S12). The CPU 21 establishes a session with the conference device 15 that has transmitted the connection request data and establishes a connection state, thereby starting a remote conference with the conference device 15 that has transmitted the connection request data (S13). At this time, only the conference device 15 that transmitted the connection request data is participating in the remote conference.

一方、接続要求データに含まれる会議IDが第1テーブル241に既に記憶されている場合、CPU21は、接続要求データに含まれる会議IDにユーザIDを対応付けて、第1テーブル241に記憶する(S12)。CPU21は、第1テーブル241に役割として「議長」が対応付けられているユーザIDで識別される会議装置15に、接続要求データを送信した会議装置15の役割を問い合わせる為の役割要求データを送信する。役割要求データには、接続要求データを送信した会議装置15のユーザIDが含められる。役割要求データを受信した会議装置15は、役割要求データに含まれるユーザIDで識別される会議装置15の役割を含む役割応答データを、サーバ11に送信する。サーバ11のCPU21は、役割応答データを受信する。CPU21は、役割応答データに含まれる役割を、接続要求データを送信した会議装置15のユーザIDに対応付けて、第1テーブル241に記憶する。CPU21は、接続要求データを送信した会議装置15とのセッションを確立させ、接続状態とすることで、接続要求データを送信した会議装置15との間で遠隔会議を開始する(S13)。なお、第1テーブル241のうち同一の会議IDに複数のユーザIDが対応付けられていることになるため、複数のユーザIDで識別される複数の会議装置15が遠隔会議に参加した状態になる。CPU21は、権限取得処理(図11参照)を実行する(S15)。   On the other hand, when the conference ID included in the connection request data is already stored in the first table 241, the CPU 21 associates the user ID with the conference ID included in the connection request data and stores the user ID in the first table 241 ( S12). The CPU 21 transmits role request data for inquiring the role of the conference apparatus 15 that transmitted the connection request data to the conference apparatus 15 identified by the user ID associated with “chairperson” as the role in the first table 241. To do. The role request data includes the user ID of the conference device 15 that transmitted the connection request data. The conference device 15 that has received the role request data transmits role response data including the role of the conference device 15 identified by the user ID included in the role request data to the server 11. The CPU 21 of the server 11 receives role response data. The CPU 21 stores the role included in the role response data in the first table 241 in association with the user ID of the conference device 15 that transmitted the connection request data. The CPU 21 establishes a session with the conference device 15 that has transmitted the connection request data and establishes a connection state, thereby starting a remote conference with the conference device 15 that has transmitted the connection request data (S13). Since a plurality of user IDs are associated with the same conference ID in the first table 241, a plurality of conference devices 15 identified by the plurality of user IDs are in a state of participating in the remote conference. . The CPU 21 executes authority acquisition processing (see FIG. 11) (S15).

図11を参照し、権限取得処理について説明する。CPU21は、第1テーブル241のうち役割として「議長」が対応付けられているユーザIDで識別される会議装置15に、閲覧権限を問い合わせるための権限要求データを送信する(S91)。権限要求データを受信した会議装置15は、役割とレベルとの対応関係を示す情報(レベルテーブル2421(図6参照)に記憶される情報)、及び、種別と閲覧権限との対応関係を示す情報(権限テーブル2422(図6参照)に記憶される情報)を含む権限応答データを、サーバ11に送信する。サーバ11のCPU21は、権限応答データを受信する(S93)。   The authority acquisition process will be described with reference to FIG. The CPU 21 transmits authority request data for inquiring browsing authority to the conference apparatus 15 identified by the user ID associated with “chairman” as a role in the first table 241 (S91). The conference apparatus 15 that has received the authority request data receives information indicating the correspondence between roles and levels (information stored in the level table 2421 (see FIG. 6)) and information indicating the correspondence between types and viewing authorities. Authority response data including (information stored in the authority table 2422 (see FIG. 6)) is transmitted to the server 11. The CPU 21 of the server 11 receives authority response data (S93).

CPU21は、受信した権限応答データに含まれる情報のうち、役割とレベルとの対応関係を示す情報を、第2テーブル242のレベルテーブル2421に記憶する(S95)。CPU21は、受信した権限応答データに含まれる情報のうち、種別と閲覧権限との対応関係を示す情報を、第2テーブル242の権限テーブル2422に記憶する(S95)。CPU21は権限取得処理を終了させ、メイン処理(図8参照)に処理を戻す。図8に示すように、CPU21は、権限取得処理(S15)の終了後、処理をS11に戻す。   CPU21 memorize | stores the information which shows the correspondence of a role and a level in the level table 2421 of the 2nd table 242 among the information contained in the received authority response data (S95). CPU21 memorize | stores the information which shows the correspondence of a classification and browsing authority among the information contained in the received authority response data in the authority table 2422 of the 2nd table 242 (S95). The CPU 21 ends the authority acquisition process and returns the process to the main process (see FIG. 8). As shown in FIG. 8, the CPU 21 returns the process to S11 after the end of the authority acquisition process (S15).

CPU21は、S11において接続要求データを受信していないと判断した場合(S11:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから送信された、撮影画像メディアに含まれる画像データの受信を開始したか判断する(S17)。CPU21は、撮影画像メディアに含まれる画像データの受信を開始したと判断した場合(S17:YES)、第1テーブル241のうち、撮影画像メディアを送信した会議装置15のユーザIDに対応する会議IDに対応付けられた全てのユーザIDを、参加IDとして特定する。CPU21は、受信を開始した画像データを含む撮影画像メディアの名称を、参加IDに対応づけて第1テーブル241に記憶する(S19)。なお会議装置15は、同一の撮影画像メディアに基づく複数の画像データをストリーミング送信する。このためCPU21は、会議装置15から送信された画像データを、第1テーブル241に名称を記憶した撮影画像メディアに含まれる画像データとして繰り返し受信する。    When the CPU 21 determines that the connection request data is not received in S11 (S11: NO), the captured image transmitted from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether reception of image data included in the medium has been started (S17). When the CPU 21 determines that the reception of the image data included in the photographic image media has been started (S17: YES), the conference ID corresponding to the user ID of the conference device 15 that has transmitted the photographic image media in the first table 241. All user IDs associated with are identified as participation IDs. CPU21 memorize | stores the name of the picked-up image media containing the image data which started reception in the 1st table 241 corresponding to participation ID (S19). The conference device 15 transmits a plurality of image data based on the same photographed image media by streaming. For this reason, the CPU 21 repeatedly receives the image data transmitted from the conference device 15 as image data included in the photographic image medium whose name is stored in the first table 241.

CPU21は、受信した撮影画像メディアに基づく撮影画像のウィンドウを含む表示画像を、参加IDで識別される会議装置15毎に作成する。CPU21は、作成した表示画像中の撮影画像のウィンドウの表示領域を、参加ID毎に特定し、参加IDに対応づけて第1テーブル241に記憶する。CPU21は、参加IDで識別される会議装置15に、作成した表示画像を送信する(S21)。なおCPU21は、会議装置15から画像データを継続的に受信する為、画像データを受信する度に、表示画像に含まれる撮影画像を更新する。CPU21は、撮影画像が更新された表示画像を、参加IDで識別される会議装置15に繰り返し送信する。CPU21は処理をS11に戻す。   The CPU 21 creates a display image including a captured image window based on the received captured image media for each conference device 15 identified by the participation ID. The CPU 21 specifies the display area of the captured image window in the created display image for each participation ID, and stores it in the first table 241 in association with the participation ID. The CPU 21 transmits the created display image to the conference device 15 identified by the participation ID (S21). Note that the CPU 21 continuously receives image data from the conference apparatus 15, and therefore updates the captured image included in the display image every time image data is received. The CPU 21 repeatedly transmits the display image with the captured image updated to the conference device 15 identified by the participation ID. CPU21 returns a process to S11.

サーバ11から送信された表示画像を受信した会議装置15は、受信した表示画像をディスプレイ37に表示する。表示画像には、撮影画像が少なくとも含まれる為、会議装置15のユーザは、遠隔会議に参加する他の会議装置15の他のユーザの様子を視認できる。   The conference device 15 that has received the display image transmitted from the server 11 displays the received display image on the display 37. Since the display image includes at least a captured image, the user of the conference device 15 can visually check the state of the other users of the other conference devices 15 participating in the remote conference.

CPU21は、S17において撮影画像メディアを受信していないと判断した場合(S17:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから、共有資料メディアを受信したか判断する(S23)。CPU21は、共有資料メディアを受信したと判断した場合(S23:YES)、第1テーブル241のうち、共有資料メディアを送信した会議装置15のユーザIDに対応する会議IDに対応付けられた全てのユーザIDを、参加IDとして特定する。CPU21は、受信した共有資料メディアの名称を、参加IDに対応づけて第1テーブル241に記憶する(S25)。またCPU21は、受信した共有資料メディアを、第1テーブル241の名称に関連付けてHDD24に記憶する。   If the CPU 21 determines in S17 that it has not received the photographed image media (S17: NO), it receives the shared material media from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether it has been done (S23). If the CPU 21 determines that the shared material medium has been received (S23: YES), the CPU 21 of the first table 241, all the correspondences associated with the conference ID corresponding to the user ID of the conference device 15 that has transmitted the shared material medium. The user ID is specified as the participation ID. The CPU 21 stores the received name of the shared material medium in the first table 241 in association with the participation ID (S25). Further, the CPU 21 stores the received shared material medium in the HDD 24 in association with the name of the first table 241.

CPU21は、受信した共有資料メディアに基づく共有資料のウィンドウを含む表示画像を、参加IDで識別される会議装置15毎に作成する。CPU21は、作成した表示画像中の共有資料のウィンドウの表示領域を、参加ID毎に特定し、参加IDに対応づけて第1テーブル241に記憶する。CPU21は、参加IDで識別される会議装置15に、作成した表示画像を送信する(S27)。CPU21は処理をS11に戻す。   The CPU 21 creates a display image including a shared material window based on the received shared material medium for each conference device 15 identified by the participation ID. The CPU 21 specifies the display area of the shared material window in the created display image for each participation ID, and stores the display area in the first table 241 in association with the participation ID. The CPU 21 transmits the created display image to the conference device 15 identified by the participation ID (S27). CPU21 returns a process to S11.

サーバ11から送信された表示画像を受信した会議装置15は、受信した表示画像をディスプレイ37に表示する。表示画像には、共有資料が少なくとも含まれる為、会議装置15のユーザは、共有資料を参照しながら遠隔会議を行うことができる。   The conference device 15 that has received the display image transmitted from the server 11 displays the received display image on the display 37. Since the display image includes at least the shared material, the user of the conference device 15 can perform the remote conference while referring to the shared material.

CPU21は、S23で共有資料メディアを受信していないと判断した場合(S23:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから、共有資料の表示を終了させる為の共有終了データを受信したか判断する(S29)。共有終了データには、共有資料メディアの名称が含まれる。CPU21は、共有終了データを受信したと判断した場合(S29:YES)、第1テーブル241のうち、共有終了データに含まれる名称、及び、対応する表示領域を削除する(S31)。CPU31は、共有資料が削除された表示画像を作成する。CPU21は、削除した名称及び表示領域に対応づけられたユーザIDで識別される会議装置15に、作成した表示画像を送信する(S33)。CPU21は処理をS11に戻す。   When the CPU 21 determines in S23 that the shared material medium has not been received (S23: NO), the CPU 21 displays the shared material from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether sharing end data for termination is received (S29). The sharing end data includes the name of the shared material medium. When it is determined that the sharing end data has been received (S29: YES), the CPU 21 deletes the name included in the sharing end data and the corresponding display area from the first table 241 (S31). The CPU 31 creates a display image from which the shared material is deleted. The CPU 21 transmits the created display image to the conference device 15 identified by the deleted name and the user ID associated with the display area (S33). CPU21 returns a process to S11.

サーバ11から送信された表示画像を受信した会議装置15は、受信した表示画像をディスプレイ37に表示する。表示画像には、共有資料が含まれていない為、会議装置15のユーザは、共有資料を参照できなくなる。   The conference device 15 that has received the display image transmitted from the server 11 displays the received display image on the display 37. Since the display image does not include the shared material, the user of the conference device 15 cannot refer to the shared material.

図9に示すように、CPU21は、S29(図8参照)において共有終了データを受信していないと判断した場合(S29:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから送信された、チャットメディアに含まれる画像データの受信を開始したか判断する(S41)。チャットメディアには、チャットに参加する複数の会議装置15の複数のユーザID(以下、「チャットID」という。)が含まれる。CPU21は、チャットメディアに含まれる画像データの受信を開始したと判断した場合(S41:YES)、受信を開始した画像データを含むチャットメディアの名称を、チャットIDに対応づけて第1テーブル241に記憶する(S43)。なお会議装置15は、同一のチャットメディアに基づく複数の画像データを、チャットの内容を示すテキストが更新される度に送信する。このためCPU21は、会議装置15から送信された画像データを、第1テーブル241に名称を記憶したチャットメディアに含まれる画像データとして繰り返し受信する。   As shown in FIG. 9, when the CPU 21 determines in S29 (see FIG. 8) that it has not received the sharing end data (S29: NO), the conference identified by the user ID stored in the first table 241. It is determined whether reception of image data included in the chat media transmitted from any of the devices 15 is started (S41). The chat media includes a plurality of user IDs (hereinafter referred to as “chat IDs”) of a plurality of conference apparatuses 15 participating in the chat. When the CPU 21 determines that the reception of the image data included in the chat media is started (S41: YES), the name of the chat media including the image data that has started reception is associated with the chat ID in the first table 241. Store (S43). The conference device 15 transmits a plurality of image data based on the same chat media every time the text indicating the chat content is updated. For this reason, the CPU 21 repeatedly receives the image data transmitted from the conference device 15 as the image data included in the chat media whose names are stored in the first table 241.

CPU21は、受信したチャットメディアに基づくチャット画像のウィンドウを含む表示画像を、チャットIDで識別される会議装置15毎に作成する。CPU21は、作成した表示画像中のチャット画像のウィンドウの表示領域を特定し、チャットIDに対応付けて第1テーブル241に記憶する。CPU21は、チャットIDで識別される会議装置15に、作成した表示画像を送信する(S45)。なおCPU21は、会議装置15から画像データを継続的に受信する為、画像データを受信する度に、表示画像に含まれるチャット画像を更新する。CPU21は、チャット画像が更新された表示画像を、チャットIDで識別される会議装置15に繰り返し送信する。CPU21は処理をS11(図8参照)に戻す。   The CPU 21 creates a display image including a chat image window based on the received chat media for each conference device 15 identified by the chat ID. The CPU 21 specifies the display area of the chat image window in the created display image, and stores it in the first table 241 in association with the chat ID. CPU21 transmits the produced display image to the conference apparatus 15 identified by chat ID (S45). Note that the CPU 21 continuously receives image data from the conference device 15, and therefore updates the chat image included in the display image every time image data is received. CPU21 transmits repeatedly the display image in which the chat image was updated to the conference apparatus 15 identified by chat ID. The CPU 21 returns the process to S11 (see FIG. 8).

例えば、会議装置12、13間でチャットが実行される場合、会議装置12、13の夫々のディスプレイ37に表示させる表示画像が作成される。作成された表示画像中のチャット画像のウィンドウの表示領域が特定される。特定された表示領域は、ユーザID12、13の夫々に対応付けて、第1テーブル241に記憶される。作成された表示画像は、会議装置12、13に対して送信される。なおこの場合、会議装置14はチャットに参加していない為、図5に示すように、チャットメディアの名称及び表示領域は、ユーザID14に対応付けられない。また、作成された表示画像は会議装置14に送信されない。   For example, when a chat is performed between the conference apparatuses 12 and 13, display images to be displayed on the respective displays 37 of the conference apparatuses 12 and 13 are created. The display area of the chat image window in the generated display image is specified. The identified display area is stored in the first table 241 in association with each of the user IDs 12 and 13. The created display image is transmitted to the conference apparatuses 12 and 13. In this case, since the conference device 14 does not participate in the chat, the name and display area of the chat media are not associated with the user ID 14 as shown in FIG. Further, the created display image is not transmitted to the conference apparatus 14.

CPU21は、S41においてチャットメディアに含まれる画像データの受信を開始した後、更に別のチャットメディアに含まれる画像データの受信を開始していないと判断した場合(S41:NO)、チャットIDで識別される会議装置15の何れかから、チャットを終了させる為のチャット終了データを受信したか判断する(S47)。チャット終了データには、チャットIDが含まれる。CPU21は、チャット終了データを受信したと判断した場合(S47:YES)、S41で開始されたチャットメディアに含まれる画像データの受信を終了する。CPU21は、第1テーブル241のうち、チャット終了データに含まれるチャットIDに対応付けられたチャットメディアの名称、及び、対応する表示領域を削除する(S49)。CPU31は、チャット画像のウィンドウが削除された表示画像を作成する。CPU21は、チャットIDで識別される会議装置15に、作成した表示画像を送信する(S51)。CPU21は処理をS11(図8参照)に戻す。   If the CPU 21 determines that the reception of the image data included in another chat media has not started after the reception of the image data included in the chat media in S41 (S41: NO), it is identified by the chat ID. It is determined whether chat end data for ending the chat has been received from any of the conference devices 15 to be performed (S47). The chat end data includes a chat ID. When it is determined that the chat end data has been received (S47: YES), the CPU 21 ends the reception of the image data included in the chat media started in S41. The CPU 21 deletes the name of the chat media associated with the chat ID included in the chat end data and the corresponding display area from the first table 241 (S49). The CPU 31 creates a display image from which the chat image window has been deleted. CPU21 transmits the produced display image to the conference apparatus 15 identified by chat ID (S51). The CPU 21 returns the process to S11 (see FIG. 8).

サーバ11から送信された表示画像を受信した会議装置15は、受信した表示画像をディスプレイ37に表示する。表示画像には、チャット画像のウィンドウが含まれていないため、会議装置15のユーザは、チャットを継続できなくなる。   The conference device 15 that has received the display image transmitted from the server 11 displays the received display image on the display 37. Since the display image does not include the chat image window, the user of the conference device 15 cannot continue the chat.

CPU21は、S47においてチャット終了データを受信していないと判断した場合(S47:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから、記録開始データを受信したか判断する(S53)。記録開始データは、会議装置15のCPU31が履歴情報の記録の開始を要求する入力操作を受け付けたことに応じて、会議装置15からサーバ11に送信される。CPU21は、記録開始データを受信したと判断した場合(S53:YES)、CPU21は記録処理(図12参照)を開始する(S55)。記録処理の詳細は後述する。CPU21は、会議装置15から受信したメディア(撮影画像メディア、共有思料メディア、及びチャットメディアの何れか)に基づく画像を議事録画像として使用する為、メディアに含まれる画像データを受信した場合に、受信した画像データをHDD24に記憶する処理を開始する(S56)。CPU21は処理をS11(図8参照)に戻す。   If the CPU 21 determines in S47 that the chat end data has not been received (S47: NO), it receives the recording start data from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether or not (S53). The recording start data is transmitted from the conference device 15 to the server 11 in response to the CPU 31 of the conference device 15 receiving an input operation requesting the start of recording history information. When the CPU 21 determines that the recording start data has been received (S53: YES), the CPU 21 starts the recording process (see FIG. 12) (S55). Details of the recording process will be described later. When the CPU 21 receives the image data included in the media in order to use the image based on the media (any one of the captured image media, the shared media, and the chat media) received from the conference device 15 as the minutes image, A process of storing the received image data in the HDD 24 is started (S56). The CPU 21 returns the process to S11 (see FIG. 8).

CPU21は、S53において記録開始データを受信していないと判断した場合(S53:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから、記録終了データを受信したか判断する(S57)。記録終了データは、会議装置15のCPU31が履歴情報の記録の終了を要求する入力操作を受け付けたことに応じて、会議装置15からサーバ11に送信される。CPU21は、記録終了データを受信したと判断した場合(S57:YES)、S55で開始した記録処理を終了させるため、RAM23に終了フラグを記憶する(S59)。なおCPU21は、記録処理(図12参照)でRAM23に記憶された終了フラグを検出した場合(S101:YES、図12参照)、記録処理を終了させる。CPU21は、S56で開始した画像データの記憶を終了する(S60)。CPU21は処理をS11(図8参照)に戻す。   When the CPU 21 determines that the recording start data is not received in S53 (S53: NO), the CPU 21 receives the recording end data from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether it has been (S57). The recording end data is transmitted from the conference device 15 to the server 11 in response to the CPU 31 of the conference device 15 receiving an input operation requesting the end of recording history information. When determining that the recording end data has been received (S57: YES), the CPU 21 stores an end flag in the RAM 23 in order to end the recording process started in S55 (S59). If the CPU 21 detects an end flag stored in the RAM 23 in the recording process (see FIG. 12) (S101: YES, see FIG. 12), the CPU 21 ends the recording process. The CPU 21 ends the storage of the image data started in S56 (S60). The CPU 21 returns the process to S11 (see FIG. 8).

図10に示すように、S57(図8参照)において記録終了データを受信していないと判断した場合(S57:NO)、CPU21は、第1テーブル241に記憶されたユーザIDのうち「議長」の役割に対応付けられたユーザIDで識別される会議装置15から、権限変更データを受信したか判断する(S61)。権限変更データは、会議装置15のCPU31が閲覧権限を変更する入力操作を受け付けたことに応じて、会議装置15からサーバ11に送信される。権限変更データには、役割とレベルとの対応関係を示す情報、及び、種別と閲覧権限との対応関係を示す情報が含まれる。CPU21は、権限変更データを受信したと判断した場合(S61:YES)、受信した権限変更データに含まれる情報のうち、役割とレベルとの対応関係を示す情報を、第2テーブル242のレベルテーブル2421に記憶し、役割及びレベルを変更する。CPU21は、受信した権限応答データに含まれる情報のうち、種別と閲覧権限との対応関係を示す情報を、第2テーブル242の権限テーブル2422に記憶し、種別及び閲覧権限を変更する(S63)。CPU21は処理をS11(図8参照)に戻す。   As shown in FIG. 10, when it is determined in S57 (see FIG. 8) that the recording end data has not been received (S57: NO), the CPU 21 selects “chairperson” from the user IDs stored in the first table 241. It is determined whether authority change data has been received from the conference device 15 identified by the user ID associated with the role (S61). The authority change data is transmitted from the conference apparatus 15 to the server 11 in response to the CPU 31 of the conference apparatus 15 receiving an input operation for changing the browsing authority. The authority change data includes information indicating the correspondence between roles and levels, and information indicating the correspondence between types and browsing authorities. When the CPU 21 determines that the authority change data has been received (S61: YES), the level table of the second table 242 indicates information indicating the correspondence between roles and levels among the information included in the received authority change data. 2421 to change the role and level. CPU21 memorize | stores the information which shows the correspondence of a classification and browsing authority among the information contained in the received authority response data in the authority table 2422 of the 2nd table 242, and changes a classification and browsing authority (S63). . The CPU 21 returns the process to S11 (see FIG. 8).

CPU21は、S61において権限変更データを受信していないと判断した場合(S61:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから、位置変更データを受信したか判断する(S71)。位置変更データは、会議装置15のCPU31がディスプレイ37に表示された表示画像のうち特定のウィンドウの表示位置を変更する入力操作を受け付けた事に応じて、会議装置15からサーバ11に送信される。位置変更データには、種別、名称、及び変更後の表示領域が含まれる。CPU21は、位置変更データを受信したと判断した場合(S71:YES)、第1テーブル241のうち、位置変更データに含まれる種別及び名称に対応付けら得た表示領域を、位置変更データに含まれる表示領域に変更して記憶する(S73)。   When the CPU 21 determines in S61 that the authority change data has not been received (S61: NO), the CPU 21 receives the position change data from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether or not (S71). The position change data is transmitted from the conference apparatus 15 to the server 11 in response to the CPU 31 of the conference apparatus 15 receiving an input operation for changing the display position of a specific window in the display image displayed on the display 37. . The position change data includes a type, a name, and a display area after change. When the CPU 21 determines that the position change data has been received (S71: YES), the display area obtained in association with the type and name included in the position change data in the first table 241 is included in the position change data. The display area is changed and stored (S73).

CPU21は、位置変更データに含まれる種別及び名称のメディアに基づく画像の表示領域を、位置変更データに含まれる表示領域に変更した表示画像を作成する。CPU21は、変更された表示領域に対応付けられたユーザIDで識別される会議装置15に、作成した表示画像を送信する(S74)。CPU21は処理をS11(図8参照)に戻す。   The CPU 21 creates a display image in which an image display area based on the type and name media included in the position change data is changed to a display area included in the position change data. The CPU 21 transmits the created display image to the conference device 15 identified by the user ID associated with the changed display area (S74). The CPU 21 returns the process to S11 (see FIG. 8).

CPU21は、S71において位置変更データを受信していないと判断した場合(S71:NO)、第1テーブル241に記憶されたユーザIDで識別される会議装置15の何れかから、会議脱退データを受信したか判断する(S75)。会議脱退データは、会議装置15のCPU31が参加中の遠隔会議から脱退する入力操作を受け付けたことに応じて、会議装置15からサーバ11に送信される。会議脱退データは、送信元の会議装置15のユーザIDを含む。CPU21は、会議脱退データを受信したと判断した場合(S75:YES)、会議脱退データに含まれるユーザIDを、第1テーブル241から削除する(S77)。CPU21は、削除したユーザIDに対応付けられた役割と、撮影画像メディア、共有資料メディア、及びチャットメディアの夫々の名称及び表示領域とを、第1テーブル241から削除する(S77)。   When the CPU 21 determines that the position change data is not received in S71 (S71: NO), the CPU 21 receives the conference withdrawal data from any of the conference devices 15 identified by the user ID stored in the first table 241. It is determined whether it has been (S75). The conference withdrawal data is transmitted from the conference device 15 to the server 11 in response to the CPU 31 of the conference device 15 receiving an input operation for withdrawal from the participating remote conference. The conference withdrawal data includes the user ID of the conference device 15 that is the transmission source. When determining that the conference withdrawal data has been received (S75: YES), the CPU 21 deletes the user ID included in the conference withdrawal data from the first table 241 (S77). The CPU 21 deletes the role associated with the deleted user ID and the names and display areas of the photographed image media, shared material media, and chat media from the first table 241 (S77).

CPU21は、削除後の第1テーブル241に記憶された情報に基づいて表示画像を作成する。例えば、会議装置12、13、14が遠隔会議に参加している状態で、会議装置14が遠隔会議から脱退した場合、会議装置14から受信した撮影画像のウィンドウが、会議装置12、13の夫々に送信される表示画像から削除され、残りの撮影画像のウィンドウの位置が調整される。CPU21は、作成された表示画像中の撮影画像のウィンドウの表示領域を特定し、第1テーブル241に記憶して変更する。CPU21は、削除したユーザIDに対応する会議IDに対応付けられたユーザIDで識別される会議装置15に、作成した表示画像を送信する(S79)。CPU21は処理をS11(図8参照)に戻す。   The CPU 21 creates a display image based on the information stored in the first table 241 after deletion. For example, when the conference device 14 withdraws from the remote conference while the conference devices 12, 13, 14 are participating in the remote conference, the windows of the captured images received from the conference device 14 are displayed on the conference devices 12, 13, respectively. Is deleted from the display image transmitted to, and the window positions of the remaining captured images are adjusted. The CPU 21 specifies the display area of the captured image window in the generated display image, stores it in the first table 241, and changes it. The CPU 21 transmits the created display image to the conference device 15 identified by the user ID associated with the conference ID corresponding to the deleted user ID (S79). The CPU 21 returns the process to S11 (see FIG. 8).

CPU21は、会議脱退データを受信していないと判断した場合(S75:NO)、処理をS11(図8参照)に戻す。   CPU21 returns a process to S11 (refer FIG. 8), when it is judged that the conference withdrawal data is not received (S75: NO).

図12を参照し、記憶処理について説明する。CPU21は、記録処理を終了させるか判断する(S101)。CPU21は、RAM23に終了フラグが記憶されている場合、記録処理を終了させると判断し(S101:YES)、記録処理を終了させる。終了フラグは、メイン処理のS59(図9参照)でRAM23に記憶される。CPU21は、RAM23に終了フラグが記憶されていない場合、記録処理を継続すると判断する(S101:NO)。   The storage process will be described with reference to FIG. The CPU 21 determines whether to end the recording process (S101). When the end flag is stored in the RAM 23, the CPU 21 determines to end the recording process (S101: YES), and ends the recording process. The end flag is stored in the RAM 23 in S59 of the main process (see FIG. 9). If the end flag is not stored in the RAM 23, the CPU 21 determines to continue the recording process (S101: NO).

CPU21は、第1テーブル241にメディアが追加されたか、又は、第1テーブル241に記憶されたメディアが変更されたか判断する(S105)。メイン処理(図8参照)でメディアに含まれる画像データの受信が開始された場合(S17、S23、S41)、メディアの名称が第1テーブル241に記憶される(S19、S25、S43)。従ってCPU21は、第1テーブル241に名称が追加された場合又は名称が変更された場合に、メディアが追加又は変更されたと判断する。また、メイン処理で共有資料メディアがの資料共有が終了された場合(S29)、受信された共有資料メディアの名称が第1テーブル241から削除される(S31)。また、メイン処理でチャットが終了したと判断された場合(S47)、受信されたチャットメディアの名称が第1テーブル241から削除される(S49)。従ってCPU21は、第1テーブル241の名称が削除された場合、メディアが変更されたと判断する。   The CPU 21 determines whether a medium has been added to the first table 241 or a medium stored in the first table 241 has been changed (S105). When reception of image data included in the medium is started in the main process (see FIG. 8) (S17, S23, S41), the name of the medium is stored in the first table 241 (S19, S25, S43). Therefore, the CPU 21 determines that the medium is added or changed when the name is added to the first table 241 or when the name is changed. Further, when the sharing of the shared material medium is terminated in the main process (S29), the name of the received shared material medium is deleted from the first table 241 (S31). If it is determined that the chat has ended in the main process (S47), the name of the received chat media is deleted from the first table 241 (S49). Therefore, when the name of the first table 241 is deleted, the CPU 21 determines that the medium has been changed.

CPU21は、メディアの追加又は変更がされたと判断した場合(S105:YES)、権限取得処理(図11参照)を実行する(S106)。権限取得処理によって、第2テーブル242(レベルテーブル2421及び権限テーブル2422)は更新される。権限取得処理の説明は省略する。CPU21は、追加又は変更された名称に対応する会議IDに対応付けられた全てのユーザID、及び、全てのメディアの名称とその種別を、第1テーブル241に基づいて取得する(S107)。   When the CPU 21 determines that the medium has been added or changed (S105: YES), the CPU 21 executes an authority acquisition process (see FIG. 11) (S106). The second table 242 (level table 2421 and authority table 2422) is updated by the authority acquisition process. A description of the authority acquisition process is omitted. The CPU 21 acquires all the user IDs associated with the conference ID corresponding to the added or changed name and the names and types of all the media based on the first table 241 (S107).

CPU21は、第2テーブル242に基づき、ユーザID毎の許否情報を、取得された種別毎に特定する。許否情報の特定方法は、具体的に次の通りである。CPU21は、第1テーブル241のうち、S107で取得したユーザIDに対応する役割(「議長」「発表者」「参加者」の何れか)を特定する。CPU21は、S107で取得した種別(「撮影画像」「共有資料」「チャット」の何れか)に対応する閲覧権限(「参加者以上」「発表者以上」「任意」の何れか)を、権限テーブル2422に基づいて特定する。CPU21は、特定した役割と閲覧権限とに基づき、メディアの閲覧が許可されているか否かを示す許否情報を、ユーザID毎に特定する。例えば、種別が「撮影画像」である場合、閲覧権限が「参加者以上」になる為、役割が「議長」「発表者」「参加者」に対応する会議装置15に対するメディアの閲覧が許可され、「非参加者」に対応する会議装置15に対するメディアの閲覧は禁止される。また例えば、種別が「共有資料」である場合、閲覧権限が「発表者以上」になる為、役割が「議長」「発表者」に対応する会議装置15に対するメディアの閲覧が許可され、「参加者」「非参加者」に対応する会議装置15に対するメディアの閲覧は禁止される。CPU21は、ユーザID毎に特定された許否情報(「許可」「禁止」の何れか)を、種別及び名称に対応付ける(S108)。以上の処理は、取得された全ての種別に対して実行される。   Based on the second table 242, the CPU 21 specifies permission / denial information for each user ID for each acquired type. The specific method of specifying permission / denial information is as follows. The CPU 21 specifies a role (any one of “chairman”, “presenter”, and “participant”) corresponding to the user ID acquired in S107 in the first table 241. The CPU 21 assigns a viewing authority (any one of “participant or higher”, “presenter or higher”, or “arbitrary”) corresponding to the type acquired in S107 (any one of “photographed image”, “shared material”, and “chat”). This is specified based on the table 2422. Based on the specified role and browsing authority, the CPU 21 specifies permission information indicating whether or not browsing of the media is permitted for each user ID. For example, when the type is “photographed image”, since the viewing authority is “participant or higher”, media viewing is permitted for the conference device 15 corresponding to the role of “chairperson”, “presenter”, and “participant”. The browsing of the media with respect to the conference device 15 corresponding to “non-participant” is prohibited. Also, for example, when the type is “shared material”, the viewing authority is “presenter or higher”, so that the media browsing to the conference device 15 corresponding to the role of “chairperson” or “presenter” is permitted, and “participation” Viewing of the media with respect to the conference apparatus 15 corresponding to “person” and “non-participant” is prohibited. The CPU 21 associates permission / rejection information (any of “permitted” and “prohibited”) specified for each user ID with the type and name (S108). The above processing is executed for all acquired types.

CPU21は、メディアが追加又は変更された時刻として現時点の時刻をOSから取得する。なお、メイン処理と記録処理とは並列して実行される為、メイン処理でメディア(撮影画像メディア、共有資料メディア、及びチャットメディアのいずれか)に含まれる画像データの受信が開始され、第1テーブル241にメディアの名称が記憶されるタイミングと、記録処理のS105で、メディアが追加又は変更されたと判断されるタイミングは、略同一となる。CPU21は、取得した時刻に対応する時刻情報を、S108で対応付けた種別、名称、及び許否情報にさらに対応付ける(S109)。   The CPU 21 acquires the current time from the OS as the time when the medium is added or changed. Since the main process and the recording process are executed in parallel, reception of image data included in the medium (any one of the photographed image medium, the shared material medium, and the chat medium) is started in the main process. The timing when the name of the medium is stored in the table 241 and the timing when it is determined that the medium is added or changed in S105 of the recording process are substantially the same. The CPU 21 further associates the time information corresponding to the acquired time with the type, name, and permission / rejection information associated in S108 (S109).

CPU21は、第1テーブル241に基づき、S107で取得された名称に対応する表示領域を、ユーザID毎に取得する(S110)。なおCPU21は、取得された表示領域のうち許否情報「禁止」に対応する表示領域に基づいてマスク画像を作成する(S113参照、後述)。従って、取得された表示領域のうち許否情報「禁止」に対応する表示領域は、マスク画像が表示される領域(マスク領域)に相当することになる。CPU21は、取得したユーザID毎の表示領域を、時刻情報、種別、名称、及び許否情報に更に対応づける(S110)。CPU21は、対応付けた時刻情報、種別、名称、許否情報、及び表示領域を、第3テーブル243としてHDD24に記憶する(S111)。   Based on the first table 241, the CPU 21 acquires a display area corresponding to the name acquired in S107 for each user ID (S110). The CPU 21 creates a mask image based on the display area corresponding to the permission / prohibition information “prohibition” in the acquired display area (see S113, described later). Therefore, the display area corresponding to the permission / prohibition information “prohibited” in the acquired display area corresponds to the area (mask area) where the mask image is displayed. The CPU 21 further associates the acquired display area for each user ID with time information, type, name, and permission / rejection information (S110). The CPU 21 stores the associated time information, type, name, permission / denial information, and display area in the HDD 24 as the third table 243 (S111).

CPU21は、「禁止」の許否情報が対応付けられた表示領域(マスク領域)に基づいてマスク画像を作成する(S113)。具体的には、CPU21は、「禁止」の許否情報が対応付けられた表示領域(マスク領域)で示される矩形状の領域を単色(例えば黒色)で塗り潰した画像を、マスク画像として作成する。CPU21は、第3テーブル243の表示領域に、S56(図9参照)に基づきHDD24に記憶されたメディアに基づく画像を配置することによって、表示画像を作成する。CPU21は、作成された表示画像及びマスク画像を含む議事録画像を生成する(S113)。CPU21は処理をS101に戻す。   The CPU 21 creates a mask image based on a display area (mask area) associated with permission / prohibition information of “prohibited” (S113). Specifically, the CPU 21 creates, as a mask image, an image in which a rectangular area indicated by a display area (mask area) associated with permission / inhibition information of “prohibited” is filled with a single color (for example, black). The CPU 21 creates a display image by arranging an image based on the media stored in the HDD 24 based on S56 (see FIG. 9) in the display area of the third table 243. The CPU 21 generates a minutes image including the created display image and mask image (S113). The CPU 21 returns the process to S101.

なおCPU21は、遠隔会議の終了後、生成された議事録画像を会議装置15のディスプレイ37に表示させることができる。CPU21は、「禁止」の許否情報が対応付けられているユーザIDの会議装置15のディスプレイ37に議事録画像を表示させる場合、対応するマスク画像を表示画像に重ねて表示させる。これによってCPU21は、表示画像に含まれる特定の画像を、マスク画像によって隠蔽できる。   The CPU 21 can display the generated minutes image on the display 37 of the conference device 15 after the end of the remote conference. When displaying the minutes image on the display 37 of the conference device 15 having the user ID associated with the permission / prohibition information of “prohibited”, the CPU 21 displays the corresponding mask image superimposed on the display image. Thereby, the CPU 21 can conceal the specific image included in the display image with the mask image.

例えば、時刻「0:35:27」に、チャットメディアが追加されたと判断された場合(S105:YES)を例に挙げ、図7の第3テーブル2433が作成される場合について具体的に説明する。   For example, the case where it is determined that chat media has been added at time “0:35:27” (S105: YES) is taken as an example, and the case where the third table 2433 of FIG. 7 is created will be specifically described. .

第1テーブル241のうち名称「s1,s2,s3」、種別「撮影画像」、及び、ユーザID「12」「13」「14」が取得される(S107)。ユーザID「12」「13」「14」の夫々に対応する役割「議長」「参加者」「発表者」が、第1テーブル241に基づいて特定される。種別「撮影画像」に対応する閲覧権限「参加者以上」が、権限テーブル2422に基づいて特定される。役割「議長」「参加者」「発表者」は全て「参加者以上」に該当する為、ユーザID「12」「13」「14」の全ては、撮影画像の閲覧が許可されると判断される。ユーザID「12」「13」「14」の許否情報として、「許可」が特定される(S108)。更に、「非参加者」に対応する許否情報として「禁止」が特定される(S108)。   The names “s1, s2, s3”, the type “captured image”, and the user IDs “12”, “13”, and “14” are acquired from the first table 241 (S107). The roles “chairman”, “participant”, and “presenter” corresponding to the user IDs “12”, “13”, and “14” are specified based on the first table 241. The viewing authority “participant or higher” corresponding to the type “captured image” is specified based on the authority table 2422. Since the roles “chairperson”, “participant”, and “presenter” all fall under “participants and higher”, it is determined that all of the user IDs “12”, “13”, and “14” are permitted to view the captured image. The “Permitted” is specified as permission / denial information of the user IDs “12”, “13”, and “14” (S108). Further, “prohibited” is specified as permission / inhibition information corresponding to “non-participant” (S108).

また、第1テーブル241のうち名称「t」、種別「共有資料」、及び、ユーザID「12」「13」「14」が取得される(S107)。種別「共有資料」に対応する閲覧権限「発表者以上」が、権限テーブル2422に基づいて特定される。役割「議長」「発表者」は「発表者以上」に該当する為、ユーザID「12」「14」は撮影画像の閲覧が許可されると判断される。一方、役割「参加者」は「発表者以上」に該当しない為、ユーザID「13」は撮影画像の閲覧が禁止されると判断される。ユーザID12、14の許否情報として、「許可」が特定され、ユーザID13の許否情報として、「禁止」が特定される(S108)。更に、「非参加者」に対応する許否情報として「禁止」が特定される(S108)。   In addition, the name “t”, the type “shared material”, and the user IDs “12”, “13”, and “14” are acquired from the first table 241 (S107). The viewing authority “presenter or higher” corresponding to the type “shared material” is specified based on the authority table 2422. Since the roles “chairman” and “presenter” correspond to “presenter or higher”, it is determined that the user IDs “12” and “14” are permitted to view captured images. On the other hand, since the role “participant” does not correspond to “presenter or higher”, it is determined that the user ID “13” is prohibited from browsing the captured image. “Permitted” is specified as the permission information of the user IDs 12 and 14, and “Prohibited” is specified as the permission information of the user ID 13 (S108). Further, “prohibited” is specified as permission / inhibition information corresponding to “non-participant” (S108).

また、第1テーブル241のうち名称「u」、種別「チャット」、及び、ユーザID「12」「13」「14」が取得される(S107)。種別「チャット」に対応する閲覧権限「任意」が、権限テーブル2422に基づいて特定される。閲覧権限が「任意」である場合、第1テーブル241のうち名称「u」が対応付けられたユーザID「12」「13」(即ち、チャットを行っている会議装置12、13のユーザID)に対して、チャット画像の閲覧が許可され、チャットを行なっていない会議装置14のユーザID「14」に対して、チャット画像の閲覧が禁止される。従って、ユーザID12、13の許否情報として「許可」が特定され、ユーザID14の許否情報として「禁止」が特定される(S108)。更に、「非参加者」に対応する許否情報として「禁止」が特定される(S108)。   Further, the name “u”, the type “chat”, and the user IDs “12”, “13”, and “14” are acquired from the first table 241 (S107). The browsing authority “arbitrary” corresponding to the type “chat” is specified based on the authority table 2422. When the viewing authority is “arbitrary”, the user IDs “12” and “13” associated with the name “u” in the first table 241 (that is, the user IDs of the conference apparatuses 12 and 13 performing the chat) On the other hand, browsing of the chat image is permitted, and browsing of the chat image is prohibited for the user ID “14” of the conference apparatus 14 that is not chatting. Accordingly, “permitted” is specified as the permission information of the user IDs 12 and 13, and “prohibited” is specified as the permission information of the user ID 14 (S108). Further, “prohibited” is specified as permission / inhibition information corresponding to “non-participant” (S108).

時刻「0:35:27」が特定される(S109)。第1テーブル241に基づき、名称「s1,s2,s3」に対応するユーザID「12」「13」の夫々の表示領域(x9,xa)(xb,xc)(y9,ya)(yb,yc)(z9,za)(zb,zc)が、ユーザID「12」「13」及び「非参加者」に対応する表示領域として特定される(S110)。なお、「非参加者」には「禁止」の許否情報が対応付けられている為、「非参加者」に対応する表示領域(x9,xa)(xb,xc)(y9,ya)(yb,yc)(z9,za)(zb,zc)はマスク領域として使用される。即ち、後述するS113で、表示領域(マスク領域)にマスク画像が作成される。また、名称「s1,s2,s3」に対応するユーザID「14」の表示領域(x5,x6)(x7,x8)(y5,y6)(y7,y8)(z5,z6)(z7,z8)が特定される(S110)。   The time “0:35:27” is specified (S109). Based on the first table 241, the display areas (x9, xa) (xb, xc) (y9, ya) (yb, yc) of the user IDs “12” and “13” corresponding to the names “s1, s2, s3” ) (Z9, za) (zb, zc) are specified as display areas corresponding to the user IDs “12” “13” and “non-participant” (S110). Since “non-participant” is associated with permission / prohibition information of “prohibited”, the display area (x9, xa) (xb, xc) (y9, ya) (yb) corresponding to “non-participant” , Yc) (z9, za) (zb, zc) are used as mask regions. That is, a mask image is created in the display area (mask area) in S113 described later. Further, the display area (x5, x6) (x7, x8) (y5, y6) (y7, y8) (z5, z6) (z7, z8) of the user ID “14” corresponding to the name “s1, s2, s3” ) Is identified (S110).

同様に、名称「t」に対応するユーザID「12」「13」及び「非参加者」の夫々の表示領域(8,0)(16,9)が特定される(S110)。なお、ユーザID「13」及び「非参加者」には「禁止」の許否情報が対応付けられている為、ユーザID「13」及び「非参加者」に対応する表示領域(8,0)(16,9)はマスク領域として使用される。また、名称「t」に対応するユーザID「14」の表示領域(6,0)(16,12)が特定される(S110)。同様に、名称「u」に対応するユーザID「12」「13」及び「非参加者」の夫々の表示領域(0,5)(8,9)が特定される(S110)。なお、「非参加者」には「禁止」の許否情報が対応付けられている為、「非参加者」に対応する表示領域(0,5)(8,9)はマスク領域として使用される。   Similarly, the display areas (8, 0) (16, 9) of the user IDs “12”, “13” and “non-participant” corresponding to the name “t” are specified (S110). Since the user ID “13” and “non-participant” are associated with permission / prohibition information of “prohibited”, the display area (8, 0) corresponding to the user ID “13” and “non-participant”. (16, 9) is used as a mask area. Further, the display area (6, 0) (16, 12) of the user ID “14” corresponding to the name “t” is specified (S110). Similarly, the display areas (0, 5) (8, 9) of the user IDs “12”, “13” and “non-participant” corresponding to the name “u” are specified (S110). Since “non-participant” is associated with permission / prohibition information of “prohibited”, display areas (0, 5) (8, 9) corresponding to “non-participant” are used as mask areas. .

そして、特定された情報は対応付けられ、第3テーブル2433としてHDD24に記憶される(S111)。具体的には、種別「撮影画像」、名称「s1,s2,s3」、及び、許否情報「許可」(ユーザID「12」「13」「14」)、許否情報「禁止」(「非参加者」)、表示領域(マスク領域)(x9,xa)(xb,xc)(y9,ya)(yb,yc)(z9,za)(zb,zc)(ユーザID「12」「13」「非参加者」)、及び、表示領域(マスク領域)(x5,x6)(x7,x8)(y5,y6)(y7,y8)(z5,z6)(z7,z8)(ユーザID「14」)の組と、種別「共有資料」、名称「t」、許否情報「許可」(ユーザID「12」「14」)、許否情報「禁止」(ユーザID「13」「非参加者」)、表示領域(マスク領域)(8,0)(16,9)(ユーザID「12」「13」「非参加者」)及び、表示領域(マスク領域)(6,0)(16,12)(ユーザID「14」)の組と、種別「チャット」、名称「u」、許否情報「許可」(ユーザID「12」「13」)、許否情報「禁止」(ユーザID「14」、「非参加者」)、及び、表示領域(マスク領域)(0,5)(8,9)(ユーザID「12」「13」「非参加者」)の組とは、時間情報「0:35:27」に対応付けられ、第3テーブル2432としてHDD24に記憶される(S111)。   The specified information is associated and stored in the HDD 24 as the third table 2433 (S111). Specifically, the type “captured image”, name “s1, s2, s3”, permission information “permitted” (user ID “12” “13” “14”), permission information “prohibited” (“non-participation” Display area (mask area) (x9, xa) (xb, xc) (y9, ya) (yb, yc) (z9, za) (zb, zc) (user IDs “12” “13” “ Non-participant ") and display area (mask area) (x5, x6) (x7, x8) (y5, y6) (y7, y8) (z5, z6) (z7, z8) (user ID" 14 " ), Type “shared material”, name “t”, permission information “permitted” (user ID “12” “14”), permission information “prohibited” (user ID “13” “non-participant”), Display area (mask area) (8, 0) (16, 9) (user ID “12” “13” “non-participant”); Set area (mask area) (6, 0) (16, 12) (user ID “14”), type “chat”, name “u”, permission information “permitted” (user ID “12” “13” )), Permission information “prohibited” (user ID “14”, “non-participant”), and display area (mask area) (0, 5) (8, 9) (user ID “12” “13” “ The group of “non-participants”) is associated with the time information “0:35:27” and stored in the HDD 24 as the third table 2432 (S111).

次に、作成された第3テーブル2433に基づいてマスク画像が作成され、議事録画像が生成される場合(S113)について具体的に説明する。CPU21は第3テーブル2433を参照する。種別「撮影画像」、及び名称「s1/s2/s3」には、「非参加者」に対応する許否情報として「禁止」が対応付けられている。従って、表示領域(マスク領域)のうち、「非参加者」に対応付けられた(x9,xa)(xb,xc)(y9,ya)(yb,yc)(z9,za)(zb,zc)の領域に配置されるマスク画像が作成される。次にCPU21は、名称「s1」「s2」「s3」の撮影画像メディアをHDD24から取得する。CPU21は、表示領域(x9,xa)(xb,xc)に名称「s1」の撮影画像を配置し、表示領域(y9,ya)(yb,yc)に名称「s2」の撮影画像を配置し、表示領域(z9,za)(zb,zc)に名称「s3」の撮影画像を配置し、表示画像を作成する。なお、マスク領域(x9,xa)(xb,xc)(y9,ya)(yb,yc)(z9,za)(zb,zc)に作成したマスク画像は、表示画像内に配置した撮影画像を隠蔽できる。   Next, the case where a mask image is created based on the created third table 2433 and a minutes image is generated (S113) will be specifically described. The CPU 21 refers to the third table 2433. The type “captured image” and the name “s1 / s2 / s3” are associated with “prohibited” as permission / inhibition information corresponding to “non-participant”. Accordingly, (x9, xa) (xb, xc) (y9, ya) (yb, yc) (z9, za) (zb, zc) associated with “non-participant” in the display area (mask area). A mask image arranged in the area of) is created. Next, the CPU 21 acquires the captured image media with the names “s1”, “s2”, and “s3” from the HDD 24. The CPU 21 arranges the captured image with the name “s1” in the display area (x9, xa) (xb, xc), and arranges the captured image with the name “s2” in the display area (y9, ya) (yb, yc). Then, the captured image with the name “s3” is arranged in the display area (z9, za) (zb, zc) to create a display image. The mask image created in the mask area (x9, xa) (xb, xc) (y9, ya) (yb, yc) (z9, za) (zb, zc) is a captured image arranged in the display image. Can be concealed.

また、種別「共有資料」、及び名称「t」には、ユーザID「13」及び「非参加者」に対応する許否情報としt「禁止」が対応付けられている。従って、表示領域(マスク領域)のうち、ユーザID「13」及び「非参加者」に対応付けられた(8,0)(16,9)の領域に配置されるマスク画像が作成される。次にCPU21は、名称「t」の共有資料メディアをHDD24から取得する。CPU21は、撮影画像に加えて、表示領域(8,0)(16,9)に名称「t」の共有資料を配置し、表示画像を作成する。なお、マスク領域(8,0)(16,9)に作成したマスク画像は、表示画像内に配置した共有資料を隠蔽できる。   Further, the type “shared material” and the name “t” are associated with t “prohibited” as permission / inhibition information corresponding to the user ID “13” and “non-participant”. Therefore, a mask image arranged in the area of (8, 0) (16, 9) associated with the user ID “13” and “non-participant” in the display area (mask area) is created. Next, the CPU 21 acquires the shared material medium with the name “t” from the HDD 24. In addition to the photographed image, the CPU 21 arranges the shared material with the name “t” in the display area (8, 0) (16, 9) and creates a display image. The mask image created in the mask area (8, 0) (16, 9) can conceal the shared material arranged in the display image.

また、種別「チャット」、及び名称「u」には、ユーザID「14」及び「非参加者」に対応する許否情報として「禁止」が対応付けられている。従って、表示領域(マスク領域)のうち、「非参加者」に対応付けられた(0,5)(8,9)の領域に配置されるマスク画像が作成される。次にCPU21は、名称「u」のチャットメディアをHDD24か取得する。CPU21は、撮影画像及び共有資料に加えて、表示領域(0,5)(8,9)に名称「u」のチャット画像を配置し、表示画像を作成する。なお、マスク領域(0,5)(8,9)に作成したマスク画像は、表示画像内に配置したチャット画像を隠蔽できる。以上のようにして議事録画像が生成される。   The type “chat” and the name “u” are associated with “prohibited” as permission information corresponding to the user ID “14” and “non-participant”. Accordingly, a mask image arranged in the (0, 5) (8, 9) area associated with the “non-participant” in the display area (mask area) is created. Next, the CPU 21 acquires the chat media having the name “u” from the HDD 24. The CPU 21 arranges the chat image with the name “u” in the display area (0, 5) (8, 9) in addition to the captured image and the shared material, and creates a display image. The mask image created in the mask areas (0, 5) (8, 9) can hide the chat image arranged in the display image. The minutes image is generated as described above.

図12に示すように、CPU21は、第1テーブル241に記憶されたメディアの追加及び変更がされていないと判断した場合(S105:NO)、第1テーブルに241記憶された表示領域の何れかが変更されたか判断する(S112)。メイン処理で位置変更データが受信されている場合(S71)、変更後の表示領域が第1テーブル241に記憶されている為(S73)、表示領域が変更されたと判断される(S112:YES)。CPU21は処理をS107に進める。   As illustrated in FIG. 12, when the CPU 21 determines that the medium stored in the first table 241 has not been added or changed (S105: NO), any of the display areas stored in the first table 241 is displayed. It is determined whether or not has been changed (S112). When the position change data is received in the main process (S71), since the display area after the change is stored in the first table 241 (S73), it is determined that the display area has been changed (S112: YES). . CPU21 advances a process to S107.

CPU21は、S112において位置変更データを受信していないと判断した場合(S112:NO)、第2テーブル242(レベルテーブル2421及び権限テーブル2422)が変更されたか判断する(S114)。第2テーブル242は、メイン処理(図8参照)で会議装置15から接続要求データを受信した(S11)後、権限取得処理が実行された場合(S15)に変更される。また第2テーブル242は、メイン処理(図10参照)で会議装置15から権限変更データを受信した場合(S61)に変更される(S63)。CPU21は、第2テーブル242が変更されたと判断した場合(S114:YES)、処理をS107に進める。CPU21は、第2テーブル242が変更されていないと判断した場合(S114:NO)、処理をS101に戻す。   When determining that the position change data has not been received in S112 (S112: NO), the CPU 21 determines whether the second table 242 (level table 2421 and authority table 2422) has been changed (S114). The second table 242 is changed to the case where the authority acquisition process is executed (S15) after receiving the connection request data from the conference device 15 in the main process (see FIG. 8) (S11). The second table 242 is changed to the case where authority change data is received from the conference apparatus 15 in the main process (see FIG. 10) (S61) (S63). If the CPU 21 determines that the second table 242 has been changed (S114: YES), the process proceeds to S107. If the CPU 21 determines that the second table 242 has not been changed (S114: NO), the process returns to S101.

以上説明したように、サーバ11は、時刻情報、名称、許否情報、及び表示領域(マスク領域)を関連付けて第3テーブル243に記憶する。サーバ11は、第3テーブル243に基づいてマスク画像を作成することができる。マスク画像は、表示画像に含まれる画像を隠蔽できる。従って、作成される表示画像にマスク画像を重ねることによって、特定のメディアに基づく画像がユーザに閲覧されることを禁止できる。このようにサーバ11は、遠隔会議中に作成された表示画像を、ユーザの閲覧権限に応じた態様で遠隔会議の終了後に閲覧できるように、第3テーブル243に情報を記録できる。   As described above, the server 11 stores the time information, name, permission / denial information, and display area (mask area) in the third table 243 in association with each other. The server 11 can create a mask image based on the third table 243. The mask image can hide the image included in the display image. Therefore, by superimposing the mask image on the created display image, it is possible to prohibit the user from browsing an image based on a specific medium. In this way, the server 11 can record information in the third table 243 so that the display image created during the remote conference can be viewed after the remote conference is finished in a manner according to the viewing authority of the user.

また、第3テーブル243は時刻情報を含み、メディアの追加又は変更がある度に作成される為、サーバ11は、メディアに基づく画像の閲覧を時限的に許可したり、禁止したりすることもできる。このためサーバ11は、特定の時間内で画像の閲覧を許可し、それ以外の時間で画像の閲覧を禁止すことが可能となる。   Further, since the third table 243 includes time information and is created each time a medium is added or changed, the server 11 may permit or prohibit browsing of images based on the medium on a timely basis. it can. For this reason, the server 11 can permit browsing of images within a specific time, and prohibit browsing of images at other times.

またサーバ11は、メディアが追加されたり変更されたりした場合に、第3テーブル243に必要な情報を記憶できる。このためサーバ11は、追加や変更がされたメディアの閲覧権限を確実に取得し、第3テーブル243に記憶できる。またサーバ11は、会議装置15から受信した全てのメディアを確実に第3テーブル243に記憶できる。   The server 11 can store necessary information in the third table 243 when a medium is added or changed. For this reason, the server 11 can reliably acquire the browsing authority of the added or changed media and store it in the third table 243. Further, the server 11 can reliably store all the media received from the conference device 15 in the third table 243.

またサーバ11は、新しい会議装置15が遠隔会議に参加した場合に、第3テーブル243に必要な情報を記憶できる。このためサーバ11は、新たに遠隔会議に参加した会議装置15に対する閲覧権限を確実に取得し、第3テーブル243に記憶できる。サーバ11は、遠隔会議に参加する全ての会議装置15に関する情報を、確実に第3テーブル243に記憶できる。   The server 11 can store necessary information in the third table 243 when the new conference device 15 participates in the remote conference. For this reason, the server 11 can reliably acquire the browsing authority for the conference apparatus 15 newly participating in the remote conference, and can store it in the third table 243. The server 11 can reliably store information on all the conference devices 15 participating in the remote conference in the third table 243.

またサーバ11は、画像の表示領域が変更になった場合でも、変更後の画像の表示領域にマスク画像を表示させることができるので、画像が閲覧されることを適切に防止できる。   Further, even when the display area of the image is changed, the server 11 can display the mask image in the display area of the image after the change, so that the browsing of the image can be appropriately prevented.

またサーバ11は、ユーザID毎にマスク領域を特定し、第3テーブル243に記憶できる。従って、会議装置15毎に画像の配置が異なる場合であっても、マスク画像によって特定の画像を確実に隠蔽できる。   The server 11 can specify a mask area for each user ID and store the mask area in the third table 243. Therefore, even if the arrangement of the images is different for each conference device 15, the specific image can be reliably hidden by the mask image.

またサーバ11は、特定の会議装置15に対して複数の種別の閲覧が禁止された場合でも、複数の画像を隠蔽するための複数のマスク領域を特定することができる。従ってCPU21は、閲覧を禁止する複数の画像がユーザに閲覧されることを禁止できる。   Further, the server 11 can specify a plurality of mask areas for hiding a plurality of images even when a plurality of types of browsing are prohibited for a specific conference device 15. Therefore, the CPU 21 can prohibit the user from browsing a plurality of images that are prohibited from browsing.

なお、本発明は上記実施形態に限定されず、種々の変更が可能である。上記実施形態では、第1テーブル241にメディアが追加されるか、又は変更された場合(S105:YES)、権限要求データを会議装置15に送信することで閲覧権限を取得した。CPU21は、第1テーブル241にメディアが追加された場合、及び変更された場合、権限要求データを送信せず、第2テーブル242に記憶された情報を読み出すことによって、閲覧権限を取得してもよい。上記実施形態では、接続要求データを受信したと判断した場合(S11:YES)、権限要求データを会議装置15に送信することで閲覧権限を取得した。CPU21は、接続要求データを受信したと判断した場合、権限要求データを送信しなくてもよい。例えばCPU21は、記録開始データを受信したと判断した場合(S53:YES)、権限要求データを送信してもよい。またCPU21は、会議IDで示される遠隔会議の形態(発表形式、輪講形式、フリーディスカッション等)に応じて閲覧権限を特定してもよい。   In addition, this invention is not limited to the said embodiment, A various change is possible. In the above embodiment, when a medium is added or changed in the first table 241 (S105: YES), the viewing authority is acquired by transmitting the authority request data to the conference device 15. When the media is added to the first table 241 or when the media is changed, the CPU 21 does not transmit the authority request data, and acquires the browsing authority by reading the information stored in the second table 242. Good. In the above embodiment, when it is determined that the connection request data has been received (S11: YES), the viewing authority is acquired by transmitting the authority request data to the conference device 15. When the CPU 21 determines that the connection request data has been received, the CPU 21 does not have to transmit the authority request data. For example, when it is determined that the recording start data has been received (S53: YES), the CPU 21 may transmit authority request data. Further, the CPU 21 may specify the viewing authority according to the form of the remote conference (presentation format, lecture format, free discussion, etc.) indicated by the conference ID.

上記実施形態では、サーバ11のCPU21が記録プログラムに基づいて処理を実行することによって、第3テーブル243をHDD24に記憶した。例えば、サーバ11に接続する記録装置(別のサーバ等)のCPUが記録プログラムを実行することによって、サーバ11によって受信されたメディアに基づき第3テーブル243を記憶してもよい。   In the above embodiment, the third table 243 is stored in the HDD 24 by the CPU 21 of the server 11 executing the process based on the recording program. For example, the third table 243 may be stored on the basis of the media received by the server 11 by the CPU of the recording device (another server or the like) connected to the server 11 executing the recording program.

上記実施形態では、サーバ11によって表示画像が作成され、会議装置15に送信された。サーバ11は表示画像を作成せず、会議装置15から受信したメディアを他の会議装置15に対して転送してもよい。会議装置15からメディアを受信した会議装置15のCPUが、受信したメディアに基づいて表示画像を作成してもよい。この場合、会議装置15のCPUが記録プログラムを実行することによって、会議装置15がサーバ11から受信したメディアに基づき第3テーブル243を記憶してもよい。又は、会議装置15に接続する記録装置のCPUが記録プログラムを実行することによって、会議装置15がサーバ11から受信したメディアに基づき第3テーブル243を記憶してもよい。   In the above embodiment, a display image is created by the server 11 and transmitted to the conference device 15. The server 11 may transfer the media received from the conference device 15 to another conference device 15 without creating a display image. The CPU of the conference device 15 that has received media from the conference device 15 may create a display image based on the received media. In this case, the CPU of the conference apparatus 15 may store the third table 243 based on the media received from the server 11 by the conference apparatus 15 by executing the recording program. Alternatively, the third table 243 may be stored based on the media received by the conference apparatus 15 from the server 11 by the CPU of the recording apparatus connected to the conference apparatus 15 executing the recording program.

上記実施形態では、第3テーブル243が作成される度に、マスク画像の作成処理及び議事録画像の生成処理が実行された(S111、S113)。これに対し、記録処理の終了時(S101:NO)に、マスク画像の作成処理及び議事録データの生成処理が行われてもよい。   In the above embodiment, every time the third table 243 is created, a mask image creation process and a minutes image generation process are executed (S111, S113). On the other hand, a mask image creation process and minutes data generation process may be performed at the end of the recording process (S101: NO).

なお、会議装置15のディスプレイ37が本発明の「表示部」に相当する。S17、S23、S41の処理が本発明の「第1受信ステップ」に相当する。S91、S93、S95の処理が本発明の「第1取得ステップ」に相当する。S110の処理が本発明の「特定ステップ」に相当する。S109の処理が本発明の「第2取得ステップ」に相当する。S111の処理が本発明の「記憶ステップ」に相当する。S113の処理が本発明の「生成ステップ」に相当する。S11の処理が本発明の「第2受信ステップ」に相当する。S71の処理が本発明の「受付ステップ」に相当する。S17、S23、S41の処理を行うCPU21が本発明の「第1受信手段」に相当する。S91、S93、S95の処理を行うCPU21が本発明の「第1取得手段」に相当する。S110の処理を行うCPU21が本発明の「特定手段」に相当する。S109の処理を行うCPU21が本発明の「第2取得手段」に相当する。S111の処理を行うCPU21が本発明の「記憶手段」に相当する。S113の処理を行うCPU21が本発明の「生成手段」に相当する。   The display 37 of the conference device 15 corresponds to the “display unit” of the present invention. The processes of S17, S23, and S41 correspond to the “first reception step” of the present invention. The processes of S91, S93, and S95 correspond to the “first acquisition step” of the present invention. The process of S110 corresponds to the “specific step” of the present invention. The process of S109 corresponds to the “second acquisition step” of the present invention. The process of S111 corresponds to the “storage step” of the present invention. The process of S113 corresponds to the “generation step” of the present invention. The process of S11 corresponds to the “second reception step” of the present invention. The process of S71 corresponds to the “acceptance step” of the present invention. The CPU 21 that performs the processes of S17, S23, and S41 corresponds to the “first receiving means” of the present invention. The CPU 21 that performs the processes of S91, S93, and S95 corresponds to the “first acquisition unit” of the present invention. The CPU 21 that performs the processing of S110 corresponds to the “specifying means” of the present invention. The CPU 21 that performs the process of S109 corresponds to the “second acquisition unit” of the present invention. The CPU 21 that performs the process of S111 corresponds to the “storage unit” of the present invention. The CPU 21 that performs the process of S113 corresponds to the “generating unit” of the present invention.

1 遠隔会議システム
11 サーバ
12、13、14、15 会議装置
37 ディスプレイ
44 マスク画像
241 第1テーブル
242 第2テーブル
243 第3テーブル
2421 レベルテーブル
2422 権限テーブル
DESCRIPTION OF SYMBOLS 1 Remote conference system 11 Server 12, 13, 14, 15 Conference apparatus 37 Display 44 Mask image 241 1st table 242 2nd table 243 3rd table 2421 Level table 2422 Authority table

Claims (7)

遠隔会議に参加する会議装置の表示部に表示される画像のデータである画像データを少なくとも1つ含むメディアデータを記録する為の記録プログラムであって、
前記メディアデータを受信する第1受信ステップと、
前記第1受信ステップによって受信された前記メディアデータに含まれる画像データに基づく画像の種別毎の閲覧権限を、前記会議装置毎に特定可能な権限情報を取得する第1取得ステップと、
前記画像データに基づく画像が前記会議装置の前記表示部に表示された場合に前記画像を隠蔽することが可能な画像であるマスク画像が表示される表示領域であるマスク領域を、前記第1取得ステップによって取得された前記権限情報に基づいて、前記会議装置毎に特定する特定ステップと、
前記第1受信ステップによって前記メディアデータが受信された時刻に対応する時刻情報を取得する第2取得ステップと、
前記第1受信ステップによって受信された前記メディアデータを示す情報と、前記特定ステップによって特定された前記マスク領域と、前記マスク領域に対応する会議装置の識別情報と、前記第2取得ステップによって取得された前記時刻情報とを関連付けて記憶部に記憶する記憶ステップと、
前記記憶ステップによって前記記憶部に記憶されたメディアデータを示す情報、前記マスク領域、前記識別情報、及び前記時刻情報に基づいて、前記マスク画像を生成する生成ステップと、
をコンピュータに実行させる為の記録プログラム。
A recording program for recording media data including at least one image data which is image data displayed on a display unit of a conference device participating in a remote conference,
A first receiving step of receiving the media data;
A first acquisition step of acquiring, for each conference device, authority information that can specify the browsing authority for each type of image based on the image data included in the media data received by the first receiving step;
When the image based on the image data is displayed on the display unit of the conference apparatus, the first acquisition of a mask area that is a display area on which a mask image that is an image that can be concealed is displayed. A specific step of identifying each conference device based on the authority information acquired in step;
A second acquisition step of acquiring time information corresponding to the time when the media data was received by the first reception step;
Information indicating the media data received in the first receiving step, the mask area specified in the specifying step, identification information of the conference device corresponding to the mask area, and acquired in the second acquiring step. A storage step of associating and storing the time information in the storage unit;
Generating the mask image based on the information indicating the media data stored in the storage unit by the storing step, the mask area, the identification information, and the time information;
Recording program to make the computer execute.
前記第1取得ステップは、前記第1受信ステップによって異なるメディアデータが受信されたことに応じて、前記権限情報を取得することを特徴とする請求項1に記載の記録プログラム。   The recording program according to claim 1, wherein the first acquisition step acquires the authority information in response to reception of different media data in the first reception step. 前記遠隔会議への参加を要求する接続要求を、会議装置から受信する第2受信ステップを更に実行し、
前記第1取得ステップは、前記第2受信ステップによって前記接続要求が受信されたことに応じて、前記権限情報を取得することを特徴とする請求項1に記載の記録プログラム。
A second receiving step of receiving a connection request for requesting participation in the remote conference from the conference device;
The recording program according to claim 1, wherein the first acquisition step acquires the authority information in response to the connection request being received in the second reception step.
前記特定ステップは、
前記第1受信ステップによって複数のメディアデータが受信された場合に、複数のメディアデータの夫々に含まれる画像データに基づく複数の画像に対応する複数のマスク領域を特定することを特徴とする請求項1から3の何れかに記載の記録プログラム。
The specific step includes
The plurality of mask areas corresponding to a plurality of images based on image data included in each of the plurality of media data are specified when a plurality of media data is received in the first receiving step. The recording program according to any one of 1 to 3.
前記特定ステップは、
前記第1受信ステップによって受信された前記メディアデータに含まれる画像データに基づく画像が、前記会議装置の前記表示部に表示された場合の表示位置に応じた前記マスク領域を特定することを特徴とする請求項1から4の何れかに記載の記録プログラム。
The specific step includes
The mask region corresponding to a display position when an image based on image data included in the media data received in the first reception step is displayed on the display unit of the conference device is specified. The recording program according to any one of claims 1 to 4.
前記第1受信ステップによって受信された前記メディアデータに含まれる画像データに基づく画像の表示位置を変更する指示を受け付ける受付ステップを更に実行し、
前記特定ステップは、
前記受付ステップによって受け付けられた指示に応じて位置が変更された画像に対応するマスク画像のマスク領域を特定することを特徴とする請求項1から5の何れかに記載の記録プログラム。
A step of receiving an instruction to change an image display position based on image data included in the media data received in the first reception step;
The specific step includes
6. The recording program according to claim 1, wherein a mask area of a mask image corresponding to an image whose position has been changed according to an instruction received by the receiving step is specified.
遠隔会議に参加する会議装置の表示部に表示される画像のデータである画像データを少なくとも1つ含むメディアデータを記録する為の記録装置であって、
前記メディアデータを受信する第1受信手段と、
前記第1受信手段によって受信された前記メディアデータに含まれる画像データに基づく画像の種別毎の閲覧権限を、前記会議装置毎に特定可能な権限情報を取得する第1取得手段と、
前記画像データに基づく画像が前記会議装置の前記表示部に表示された場合に前記画像を隠蔽することが可能な画像であるマスク画像が表示される表示領域であるマスク領域を、前記第1取得手段によって取得された前記権限情報に基づいて、前記会議装置毎に特定する特定手段と、
前記第1受信手段によって前記メディアデータが受信された時刻に対応する時刻情報を取得する第2取得手段と、
前記第1受信手段によって受信された前記メディアデータを示す情報と、前記特定手段によって特定された前記マスク領域と、前記マスク領域に対応する会議装置の識別情報と、前記第2取得手段によって取得された前記時刻情報とを関連付けて記憶部に記憶する第1記憶手段と、
前記第1記憶手段によって前記記憶部に記憶されたメディアデータを示す情報、前記マスク領域、前記識別情報、及び前記時刻情報に基づいて、前記マスク画像を生成する生成手段と、
を備えたことを特徴とする記録装置。
A recording device for recording media data including at least one image data which is image data displayed on a display unit of a conference device participating in a remote conference,
First receiving means for receiving the media data;
A first acquisition unit that acquires authority information that can specify, for each conference device, a viewing authority for each type of image based on image data included in the media data received by the first receiving unit;
When the image based on the image data is displayed on the display unit of the conference apparatus, the first acquisition of a mask area that is a display area on which a mask image that is an image that can be concealed is displayed. Based on the authority information acquired by the means, specifying means for specifying for each conference device;
Second acquisition means for acquiring time information corresponding to the time when the media data was received by the first reception means;
Information indicating the media data received by the first receiving means, the mask area specified by the specifying means, identification information of the conference device corresponding to the mask area, and acquired by the second acquiring means. First storage means for associating and storing the time information in the storage unit;
Generating means for generating the mask image based on information indicating the media data stored in the storage unit by the first storage means, the mask area, the identification information, and the time information;
A recording apparatus comprising:
JP2013073470A 2013-03-29 2013-03-29 Recording program and recording device Pending JP2014197813A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013073470A JP2014197813A (en) 2013-03-29 2013-03-29 Recording program and recording device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013073470A JP2014197813A (en) 2013-03-29 2013-03-29 Recording program and recording device

Publications (1)

Publication Number Publication Date
JP2014197813A true JP2014197813A (en) 2014-10-16

Family

ID=52358328

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013073470A Pending JP2014197813A (en) 2013-03-29 2013-03-29 Recording program and recording device

Country Status (1)

Country Link
JP (1) JP2014197813A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016177612A (en) * 2015-03-20 2016-10-06 株式会社リコー Information processing system, display position determination method, terminal device, information processing device and program
JP2018022468A (en) * 2016-07-22 2018-02-08 株式会社リコー Information processing device, information processing system, system, information processing method and program
US20220060593A1 (en) * 2020-08-24 2022-02-24 Brother Kogyo Kabushiki Kaisha Image forming device and non-transitory computer-readable recording medium containing computer-executable instructions therefor

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016177612A (en) * 2015-03-20 2016-10-06 株式会社リコー Information processing system, display position determination method, terminal device, information processing device and program
JP2018022468A (en) * 2016-07-22 2018-02-08 株式会社リコー Information processing device, information processing system, system, information processing method and program
US20220060593A1 (en) * 2020-08-24 2022-02-24 Brother Kogyo Kabushiki Kaisha Image forming device and non-transitory computer-readable recording medium containing computer-executable instructions therefor
US11729325B2 (en) * 2020-08-24 2023-08-15 Brother Kogyo Kabushiki Kaisha Image forming device and non-transitory computer-readable recording medium containing computer-executable instructions therefor

Similar Documents

Publication Publication Date Title
US20200059561A1 (en) Teleconference system and terminal apparatus
US20170054858A1 (en) System and method for sharing collaborative digital photo albums
JP5409194B2 (en) Conference system
EP3131257B1 (en) Program, information processing apparatus, and information processing system for use in an electronic conference system
JP6375039B1 (en) Program, photographing method and terminal
JP2016105549A (en) Program, device and method for conference setting
JP2014179806A (en) Communication system, communication management device and program
EP3272127B1 (en) Video-based social interaction system
JP2018504701A (en) Image processing method and apparatus
JP2006005590A (en) Remote conference system, shared work space server, and remote conference method and program
JP2014197813A (en) Recording program and recording device
JP5978070B2 (en) Group photo forming apparatus, group photo forming method, and group photo forming program
JP5088257B2 (en) Self-introduction support method and self-introduction support processing device, etc.
JP2008295985A (en) Golf community system using internet
KR102190882B1 (en) Method and Apparatus for Providing of Community Platform
Venolia et al. Wish you were here: being together through composite video and digital keepsakes
US9960925B2 (en) Server apparatus program, server apparatus, and communication apparatus program
JP2018182590A (en) Video creation support system, method and program
JP2018136828A (en) Terminal device, program, and data display method
JP6955067B1 (en) Display control device, display control method and display control program
JP4413114B2 (en) Electronic conference record data processing method
CN111382292A (en) Content management server, information sharing system, and communication method
JP2015141671A (en) Content processing system, content processing server, terminal apparatus, content processing method and content processing program
JP7365608B2 (en) Profile management program
JP2018182715A (en) Video creation support system, method and program