JP2013065125A - Screen sharing system, screen sharing terminal, electronic blackboard system and program - Google Patents
Screen sharing system, screen sharing terminal, electronic blackboard system and program Download PDFInfo
- Publication number
- JP2013065125A JP2013065125A JP2011202505A JP2011202505A JP2013065125A JP 2013065125 A JP2013065125 A JP 2013065125A JP 2011202505 A JP2011202505 A JP 2011202505A JP 2011202505 A JP2011202505 A JP 2011202505A JP 2013065125 A JP2013065125 A JP 2013065125A
- Authority
- JP
- Japan
- Prior art keywords
- screen
- drawing object
- display
- screen sharing
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、画面共有システムに関し、より詳細には、複数の端末間で表示画面を共有して手書きなどにより書き込みを行いながら、遠隔会議等を行うための画面共有システム、画面共有端末、電子黒板システムおよびプログラムに関する。 The present invention relates to a screen sharing system, and more specifically, a screen sharing system, a screen sharing terminal, and an electronic blackboard for sharing a display screen among a plurality of terminals and performing writing by handwriting or the like while performing a remote conference or the like Related to system and program.
近年、液晶ディスプレイやプラズマディスプレイなどのフラットパネル・ディスプレイまたはプロジェクタの投影スクリーンにタッチパネルを搭載した、電子情報ボードと呼ばれる電子黒板装置が提供されている。上述した電子情報ボードは、パーソナル・コンピュータに接続することによって、該コンピュータの画面をスクリーンに表示することが可能とされており、通常の会議や遠隔会議におけるプレゼンテーションで活用されている。電子情報ボードは、また、マウス操作の代わりにスクリーンに直接タッチすることにより、タッチパネル機能によりパーソナル・コンピュータを操作可能とされている。 In recent years, an electronic blackboard device called an electronic information board, in which a touch panel is mounted on a flat panel display such as a liquid crystal display or a plasma display or a projection screen of a projector, has been provided. The electronic information board described above can display a computer screen on a screen by being connected to a personal computer, and is used for presentations in ordinary conferences and remote conferences. The electronic information board can operate a personal computer by a touch panel function by directly touching a screen instead of a mouse operation.
最近は、上記電子情報ボードを用いた遠隔会議システムも提供されている(特開2006−164177号公報;特許文献1)。上記電子情報ボードを用いた遠隔会議システムでは、カメラ映像や音声を通信できるのみならず、双方向で表示画面を共有することにより、会議資料などのコンテンツを多拠点で共有することが可能とされている。さらに、上記遠隔会議システムでは、共有される表示画面上のコンテンツに対し、多拠点から同時に書き込みを行うことで、該コンテンツを協同的に編集することも可能である。 Recently, a remote conference system using the electronic information board has also been provided (Japanese Patent Laid-Open No. 2006-164177; Patent Document 1). In the remote conference system using the above-mentioned electronic information board, it is possible not only to communicate camera video and audio, but also to share content such as conference materials at multiple locations by sharing the display screen in both directions. ing. Furthermore, in the remote conference system, it is possible to edit the content cooperatively by simultaneously writing the content on the display screen from multiple locations.
しかしながら、上述のような従来技術の電子情報ボードでは、コンテンツに対し多拠点から書き込みが行われる場合、書き込みの行われた資料を見返した際に、書き込まれた内容がいずれの拠点で作成されたのかを認識することが難しかった。そのため、自拠点以外の拠点の利用者が書き込んだ重要なコメントを、書き込みをした拠点に認識させないまま不用意に消してしまったりする事例が発生していた。あるいは反対に、自拠点で書き込んだ重要な内容が、知らないうちに他拠点の利用者によって勝手に消去されてしまったりするという事例も発生していた。 However, in the conventional electronic information board as described above, when the content is written from multiple sites, the written content is created at any site when the written material is reviewed. It was difficult to recognize. For this reason, there have been cases in which important comments written by users at bases other than their own base are inadvertently deleted without the writing bases recognizing them. On the other hand, there were cases where important content written at one's own site was deleted without permission by users at other sites.
多拠点の会議参加者間で会議資料を共有し資料に書き込みながら議論を行う際に、いずれの利用者が書き込みを行っているのかを認識可能とすることを目的とした技術として、特開2006−304066号公報(特許文献2)が知られている。特許文献1は、ペンに設けられた撮像装置から書き込みを行っている参加者の顔画像を取得し、書き込みを行うペンの属性情報を含むペン情報と描画情報と上記顔画像とを結びつけて各会議拠点の表示装置に送出する構成を備えたサーバ装置を開示する。 As a technique for making it possible to recognize which user is writing when a meeting material is shared between conference participants at multiple bases and the discussion is performed while writing the material, Japanese Patent No. -304066 (Patent Document 2) is known. Patent document 1 acquires the face image of the participant who is writing from the imaging device provided in the pen, and associates the pen information including the attribute information of the pen to be written, the drawing information, and the face image. Disclosed is a server device having a configuration for sending to a display device at a conference site.
また、共有ホワイトボードにおける描画内容の消去に関し、特開2009−230579号公報(特許文献3)は、リモートのクライアントに対してもレスポンス高く描画像が消去されたことを反映させることを目的とした技術を開示する。 In addition, with regard to erasing the drawing content on the shared whiteboard, Japanese Patent Application Laid-Open No. 2009-230579 (Patent Document 3) aims to reflect the fact that the drawing image is erased with high response to the remote client. Disclose technology.
上記特許文献2の技術によれば、手書き線などの描画オブジェクトが描画されているときに、各拠点の利用者に、現在いずれの利用者が描画を行っているかを認識させることができる。しかしながら、会議が進行して後に振り振り返った際に、いずれの利用者が書き込んだ描画オブジェクトであるかを参加者が覚えていなければ、結局、特定の描画オブジェクトを書き込んだ利用者を特定することは困難となる。このため、上述したような自拠点以外の拠点のユーザーが描画した描画オブジェクトを不意に消してしまったり、逆に自拠点で描画した描画オブジェクトを多拠点のユーザーに不意に消去されてしまったりするというという問題を解消できなかった。 According to the technique disclosed in Patent Document 2, when a drawing object such as a handwritten line is drawn, the user at each base can recognize which user is currently drawing. However, if the participant does not remember which drawing object the user wrote when looking back after the conference has progressed, the user who wrote the specific drawing object will eventually be identified. Will be difficult. For this reason, a drawing object drawn by a user at a base other than the above-mentioned base may be erased unexpectedly, or conversely, a drawing object drawn at the base may be erased unexpectedly by a multi-site user. It was not possible to solve the problem.
上述した背景から、描画オブジェクトの書き込みを行った作成元の主体を特定し、描画オブジェクトに削除などの操作が行われた場合に、作成元に対して通知することで、描画オブジェクトの作成元以外で作成元が認識しないうちに勝手に描画オブジェクトに操作が行われていたという事態を防止する機能が望まれていた。 From the background described above, identify the creator of the drawing object that wrote the drawing object, and notify the creator when the drawing object is deleted, etc. Therefore, there has been a demand for a function for preventing a situation where a drawing object has been operated on its own without the creator recognizing it.
本発明は、上記従来技術における不充分な点に鑑みてなされたものであり、本発明は、描画オブジェクトに対して作成元の主体以外の主体が何らかの操作を行う際に、作成元主体が認識しないうちに勝手に描画オブジェクトに対し操作が行われていたという事態を防止することができる画面共有システム、画面共有端末、電子黒板システムおよびプログラムを提供することを目的とする。 The present invention has been made in view of the insufficiency in the prior art described above, and the present invention recognizes when the main subject other than the main source performs some operation on the drawing object. An object of the present invention is to provide a screen sharing system, a screen sharing terminal, an electronic blackboard system, and a program that can prevent a situation in which an operation has been performed on a drawing object without permission.
本発明は、上記課題を解決するために、各々画面上に書き込まれる描画オブジェクトを共有し合う1以上の画面共有端末を含む画面共有システムであって、上記画面共有端末は、それぞれ、
共有される描画オブジェクトを記述する情報と、該描画オブジェクトの作成主体を識別する主体識別情報とを保存する保存手段と、
上記画面に対する入力操作に応答して、事前登録された操作イベントを検出するイベント検出手段と、
上記操作イベントに対応する描画オブジェクトの主体識別情報に応じた他の画面共有端末に対し、上記操作イベントの操作内容を含むメッセージを発行する発行手段と、
他の画面共有端末からメッセージを受信して、事前指定された表示条件にて、操作内容を表す画面表示を画面上に行う画像変換手段と
を含む、画面共有システムを提供する。
In order to solve the above problems, the present invention is a screen sharing system including one or more screen sharing terminals that share drawing objects written on the screen, and each of the screen sharing terminals includes:
Storage means for storing information describing a drawing object to be shared, and subject identification information for identifying a creation subject of the drawing object;
Event detection means for detecting a pre-registered operation event in response to an input operation on the screen;
Issuing means for issuing a message including the operation content of the operation event to another screen sharing terminal corresponding to the subject identification information of the drawing object corresponding to the operation event;
Provided is a screen sharing system including image conversion means for receiving a message from another screen sharing terminal and performing screen display representing operation content on a screen under display conditions designated in advance.
上記構成によれば、描画オブジェクトに対して作成元の主体以外の主体が何らかの操作を行ったときに、作成元主体が認識しないうちに勝手に描画オブジェクトに対し操作が行われていたという事態が発生することを低減することができる。 According to the above configuration, when a subject other than the creation source subject performs an operation on the drawing object, there is a situation in which the manipulation is performed on the drawing object without the recognition of the creation source subject. Occurrence can be reduced.
以下、図面を参照しながら、本発明の実施形態について説明するが、本発明の実施形態は、以下に説明する実施形態に限定されるものではない。なお、以下に説明する実施形態では、複数の画面共有端末を含む画面共有システムとして、複数の遠隔会議クライアントと、遠隔会議クライアント間の通信を仲介する遠隔会議サーバとを含み構成される遠隔会議システムを一例として説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings, but the embodiments of the present invention are not limited to the embodiments described below. In the embodiment described below, as a screen sharing system including a plurality of screen sharing terminals, a remote conference system including a plurality of remote conference clients and a remote conference server that mediates communication between the remote conference clients. Will be described as an example.
図1は、本実施形態による遠隔会議システムが実現されたネットワーク環境を示す図である。図1に示すネットワーク環境10は、ネットワーク12を介して相互に接続される遠隔会議サーバ14と、複数の遠隔会議クライアント20a〜20dとを含んで構成される。遠隔会議クライアント20は、それぞれ、ディスプレイおよびタッチパネルを備えており、タッチパネルを介しての入力操作が可能なように画面をディスプレイ上に表示する。 FIG. 1 is a diagram showing a network environment in which the remote conference system according to the present embodiment is realized. A network environment 10 shown in FIG. 1 includes a remote conference server 14 and a plurality of remote conference clients 20a to 20d connected to each other via a network 12. Each of the remote conference clients 20 includes a display and a touch panel, and displays a screen on the display so that an input operation via the touch panel is possible.
遠隔会議クライアント20が表示する画面は、複数の遠隔会議クライアント20間において双方向で共有することが可能とされている。以下、共有される画面を共有画面という。上記遠隔会議システムにおいて、一の遠隔会議クライアントで行われた共有画面への書き込み内容は、同一の画面共有セッションに参加する他の遠隔会議クライアント20へと伝播され、これにより画面の共有が実現される。また、図1に示す遠隔会議システムでは、さらに、遠隔会議クライアント20間でカメラ映像や音声を双方向に通信できるよう構成されている。 The screen displayed by the remote conference client 20 can be shared bidirectionally between the plurality of remote conference clients 20. Hereinafter, the shared screen is referred to as a shared screen. In the remote conference system, the content written on the shared screen performed by one remote conference client is propagated to other remote conference clients 20 participating in the same screen sharing session, thereby realizing screen sharing. The Further, the remote conference system shown in FIG. 1 is further configured to be able to bidirectionally communicate camera video and audio between the remote conference clients 20.
遠隔会議サーバ14は、遠隔会議クライアント20間のデータ送受信を仲介するサーバ機能を有する。このとき、手書きストローク、図形、テキストなどの描画オブジェクトは、背景画像とは個別に送受信される。そして、遠隔会議クライアント20側で、1以上の描画オブジェクトを背景画像に合成し、ディスプレイに表示させる表示画像データを生成する。このように、一般に更新頻度の高くかつ情報量が小さい性質を有する描画オブジェクトを背景画像とは別個に送受信することにより、効率的な遠隔会議クライアント間の画面共有を実現することが可能となる。 The remote conference server 14 has a server function that mediates data transmission / reception between the remote conference clients 20. At this time, drawing objects such as handwritten strokes, graphics, and text are transmitted and received separately from the background image. Then, on the remote conference client 20 side, one or more drawing objects are combined with the background image, and display image data to be displayed on the display is generated. As described above, it is possible to realize efficient screen sharing between remote conference clients by transmitting and receiving drawing objects having a high update frequency and a small amount of information separately from the background image.
上記構成により、会議資料などのコンテンツを多拠点に配置された遠隔会議クライアント20間で共有することができ、また、多拠点から同時に書き込みを行うことで、コンテンツを協同的に編集することが可能となる。なお、上記遠隔会議クライアント20は、説明する実施形態では、それぞれ別のロケーションに設置されるものとするが、それぞれ任意のロケーションに設けることができる。したがって、複数の遠隔会議クライアント20が同一ロケーションに設置されることは妨げられない。 With the above configuration, content such as conference materials can be shared between remote conference clients 20 located at multiple locations, and content can be edited collaboratively by writing simultaneously from multiple locations. It becomes. In addition, although the said remote conference client 20 shall be installed in a respectively different location in embodiment described, it can each be provided in arbitrary locations. Therefore, it is not prevented that a plurality of remote conference clients 20 are installed at the same location.
また、遠隔会議システムにおいて、上記描画オブジェクトは、各拠点において同時に作成、変更、削除され得る。本実施形態の遠隔会議システムは、このように多拠点で同時編集する場合に、描画オブジェクトの作成元の主体が認識しないうちに勝手に描画オブジェクトに対し操作が行われていたという事態を防止するべく、操作通知機能を備える。本操作通知機能では、描画オブジェクトに対して作成元の主体以外の主体が何らかの操作を行ったときに、操作内容が作成元の主体に向けて通知される。さらに、本実施形態の遠隔会議システムでは、上記事態が生じることを予防するために、遠隔会議クライアント20の画面上に描画オブジェクトの作成主体を表す作成主体表示機能を備える。 In the teleconference system, the drawing object can be created, changed, and deleted at each base at the same time. The remote conference system according to the present embodiment prevents a situation in which an operation is performed on a drawing object without the recognition of the main object of the drawing object when performing simultaneous editing at multiple locations in this way. Therefore, an operation notification function is provided. In this operation notification function, when a subject other than the creation source subject performs any operation on the drawing object, the operation content is notified to the creation source subject. Furthermore, the remote conference system of the present embodiment includes a creation subject display function that represents a creation subject of a drawing object on the screen of the remote conference client 20 in order to prevent the above situation from occurring.
上記ネットワーク12は、特に限定されるものではないが、イーサネット(登録商標)やTCP/IP(Transmission Control Protocol / Internet Protocol)などによるLAN(Local Area Network)、VPN(Virtual Private Network)や専用線を使用して接続されるWAN(Wide Area Network)などとして構成される。しかしながら、ネットワーク12は、特に限定されるものではなく、図示しないルータを介して接続されるインターネットなどを含んでいてもよい。さらに、上記ネットワーク12は、有線若しくは無線またはこれらの混合のネットワークとして構成することができる。 The network 12 is not particularly limited, but a LAN (Local Area Network), a VPN (Virtual Private Network), or a dedicated line using Ethernet (registered trademark) or TCP / IP (Transmission Control Protocol / Internet Protocol) is used. It is configured as a WAN (Wide Area Network) or the like that is used and connected. However, the network 12 is not particularly limited, and may include the Internet connected via a router (not shown). Furthermore, the network 12 can be configured as a wired, wireless, or mixed network.
以下、図2および図3を参照して、本実施形態における遠隔会議クライアント20の構成について説明する。図2は、本実施形態による遠隔会議クライアントのブロック構成図である。図2に示す遠隔会議クライアント20は、主として、制御装置としてのコンピュータ装置22と、ディスプレイ24と、該ディスプレイ24の前面に設けられたタッチパネル26と、座標検出装置用コントローラ30とを含む。 Hereinafter, the configuration of the remote conference client 20 in the present embodiment will be described with reference to FIGS. 2 and 3. FIG. 2 is a block diagram of the remote conference client according to the present embodiment. The remote conference client 20 shown in FIG. 2 mainly includes a computer device 22 as a control device, a display 24, a touch panel 26 provided on the front surface of the display 24, and a coordinate detection device controller 30.
ディスプレイ24は、上記コンピュータ装置22の表示画面を表示する表示装置である。ディスプレイ24は、特に限定されるものではないが、例えば、液晶ディスプレイ、プラズマディスプレイなどのフラットパネル・ディスプレイとして構成することができる。 The display 24 is a display device that displays the display screen of the computer device 22. The display 24 is not particularly limited, but can be configured as a flat panel display such as a liquid crystal display or a plasma display.
タッチパネル26は、所定の物体(例えば、操作者の指や専用ペンなど)との接触位置または接近位置を検出する座標検出装置である。タッチパネル26は、上記所定の物体の接触位置または接近位置の座標を検出することにより、画面上への描画オブジェクトの書き込みや、上記コンピュータ装置22の各種操作をコンピュータ装置22に伝達する。座標検出方式としては、特に限定されるものではないが、マトリクス・スイッチ方式、抵抗膜方式、表面弾性波方式、電磁誘導方式、静電容量方式、赤外線イメージセンサ方式などを挙げることができる。 The touch panel 26 is a coordinate detection device that detects a contact position or an approach position with a predetermined object (for example, an operator's finger or a dedicated pen). The touch panel 26 transmits the drawing object on the screen and various operations of the computer device 22 to the computer device 22 by detecting the coordinates of the contact position or approach position of the predetermined object. The coordinate detection method is not particularly limited, and examples thereof include a matrix switch method, a resistive film method, a surface acoustic wave method, an electromagnetic induction method, a capacitance method, and an infrared image sensor method.
座標検出装置用コントローラ30は、タッチパネル26に関し、操作者の指や専用ペンなどが接触または近接されるタッチ面上の座標位置の演算を行う。コンピュータ装置22は、座標検出装置用コントローラ30からの座標位置情報の入力を受けて、タッチパネル26を介して入力された描画オブジェクトをディスプレイ24に描画する処理など、システム全体の制御を行う。 The coordinate detection device controller 30 calculates the coordinate position on the touch surface with respect to the touch panel 26 where an operator's finger, a dedicated pen, or the like comes into contact with or approaches. The computer device 22 receives input of coordinate position information from the coordinate detection device controller 30 and controls the entire system, such as a process of drawing a drawing object input via the touch panel 26 on the display 24.
図3は、図2に示したコンピュータ装置22のハードウェア構成図を示す。図3に示すコンピュータ装置22は、パーソナル・コンピュータなどの汎用コンピュータであり、CPU(Central Processing Unit)40と、ROM(Read Only Memory)42と、RAM(Random Access Memory)44と、キーボード46と、マウス48と、HDD(Hard Disk Drive)50と、グラフィック・ボード52と、ネットワークI/F54と、外部機器接続I/F56とを備える。これらの各ハードウェア要素は、バス58を介して接続される。 FIG. 3 shows a hardware configuration diagram of the computer apparatus 22 shown in FIG. A computer device 22 shown in FIG. 3 is a general-purpose computer such as a personal computer, and includes a CPU (Central Processing Unit) 40, a ROM (Read Only Memory) 42, a RAM (Random Access Memory) 44, a keyboard 46, A mouse 48, a hard disk drive (HDD) 50, a graphic board 52, a network I / F 54, and an external device connection I / F 56 are provided. Each of these hardware elements is connected via a bus 58.
CPU40は、システムの全体制御を司る制御装置である。ROM42は、BIOS(Basic Input Output System)およびブートプログラムを記憶する。RAM44は、CPU40の作業領域を提供する1次記憶装置である。HDD50は、オペレーティング・システム(OS)、遠隔会議アプリケーション、各デバイスドライバおよびワードプロセッサ・表計算ソフトなどの各種アプリケーション・プログラムなどを記憶する2次記憶装置である。CPU40は、上記ROM42やHDD50に格納される各プログラムを読み出し、RAM44上に展開し、各プログラムを実行することにより、詳細は後述する画面共有機能、操作通知機能および作成主体表示機能を有する遠隔会議アプリケーションを動作させる。 The CPU 40 is a control device that controls the entire system. The ROM 42 stores a BIOS (Basic Input Output System) and a boot program. The RAM 44 is a primary storage device that provides a work area for the CPU 40. The HDD 50 is a secondary storage device that stores an operating system (OS), a remote conference application, various device drivers, various application programs such as a word processor and spreadsheet software. The CPU 40 reads out each program stored in the ROM 42 or the HDD 50, expands it on the RAM 44, and executes each program, whereby a remote conference having a screen sharing function, an operation notification function, and a creation subject display function, which will be described in detail later. Run the application.
キーボード46は、文字、数値、各種指示等の入力を行うために、マウス48は、カーソルやポインタの移動や範囲選択等を行うために用いられる入力装置である。グラフィックス・ボード52は、ディスプレイ24と接続され、ディスプレイ24に対する画像の表示を制御する。コンピュータ装置22とディスプレイ24とは、VGA(Video Graphic Array)、DVI(Digital Visual Interface)、HDMI(High-Definition Multimedia Interface)、Display Port(登録商標)などの適切な映像出力インタフェースを介して接続される。ネットワークI/F54は、コンピュータ装置22により遠隔会議クライアント20をネットワーク12に接続させるインタフェース機器である。外部機器接続インタフェース56は、コンピュータ装置22と、コントローラ30など外部機器とを接続する。 The keyboard 46 is an input device used for inputting characters, numerical values, various instructions, and the like, and the mouse 48 is an input device used for moving a cursor or pointer, selecting a range, and the like. The graphics board 52 is connected to the display 24 and controls display of images on the display 24. The computer device 22 and the display 24 are connected via an appropriate video output interface such as a VGA (Video Graphic Array), DVI (Digital Visual Interface), HDMI (High-Definition Multimedia Interface), and Display Port (registered trademark). The The network I / F 54 is an interface device that connects the remote conference client 20 to the network 12 by the computer device 22. The external device connection interface 56 connects the computer device 22 and an external device such as the controller 30.
なお、説明する実施形態では、図2に示したように、コントローラ30は、コンピュータ装置22から独立させた構成とされているが、他の実施形態では、コンピュータ装置22中にコントローラ30を内蔵させてもよい。さらに他の実施形態では、コンピュータ装置22自体にコントローラ30の機能を備えさせるようにすることもできる。 In the embodiment to be described, as shown in FIG. 2, the controller 30 is configured to be independent from the computer device 22, but in other embodiments, the controller 30 is incorporated in the computer device 22. May be. In still another embodiment, the computer device 22 itself may be provided with the function of the controller 30.
また、説明する実施形態では、上記コンピュータ装置22、ディスプレイ24およびタッチパネル26が一体化された遠隔会議デバイスとして説明している。しかしながら、他の実施形態では、コンピュータ装置、ディスプレイおよびタッチパネルがそれぞれ集合して構成されたシステムとして遠隔会議クライアントを実装してもよい。さらに、利用者に提供する態様としては、ディスプレイおよび該ディスプレイの前面に設けられるタッチパネルを備える電子黒板装置と、利用者が保有するコンピュータ装置にインストールする遠隔会議アプリケーションのプログラムとを含む電子黒板システムとして提供されてもよい。 Further, in the embodiment to be described, the remote conference device in which the computer apparatus 22, the display 24, and the touch panel 26 are integrated is described. However, in another embodiment, the remote conference client may be implemented as a system in which a computer device, a display, and a touch panel are assembled. Further, as an aspect to be provided to the user, an electronic blackboard system including an electronic blackboard device including a display and a touch panel provided on the front surface of the display, and a remote conference application program installed in a computer device owned by the user May be provided.
さらに、説明する実施形態では、表示装置としてディスプレイ24を例に、座標検出装置としてディスプレイ24に取り付けられたタッチパネル26を例に説明しているが、これらに特に限定されるものではない。他の実施形態では、ディスプレイ24に代えてプロジェクタ装置を用い、座標検出装置をスクリーン投影面に取り付けてもよく、如何なる表示装置、如何なるポインティング・データを取得可能な入力装置を備える装置として構成することができる。また、遠隔会議デバイスは、ディスプレイ、タッチパネルおよびコンピュータが一体化したタブレット型コンピュータなどの携帯情報端末として実装してもよい。 Further, in the embodiment to be described, the display 24 is taken as an example of the display device and the touch panel 26 attached to the display 24 is taken as an example of the coordinate detection device, but the present invention is not particularly limited thereto. In another embodiment, a projector device may be used in place of the display 24 and the coordinate detection device may be attached to the screen projection surface, and the display device may be configured as any display device and any input device capable of acquiring any pointing data. Can do. The remote conference device may be implemented as a portable information terminal such as a tablet computer in which a display, a touch panel, and a computer are integrated.
以下、図4を参照して、第1の実施形態において実現される画面共有機能、操作通知機能および作成主体表示機能の詳細について説明する。図4は、遠隔会議システムにおいて実現される機能ブロック図を示す。図4は、遠隔会議サーバ14の機能ブロックと、遠隔会議クライアント20の機能ブロックとを示す。なお、図4には、同一画面共有セッションに参加する遠隔会議クライアント20aおよび20bが示されている。 Hereinafter, the details of the screen sharing function, the operation notification function, and the creation subject display function realized in the first embodiment will be described with reference to FIG. FIG. 4 shows a functional block diagram implemented in the remote conference system. FIG. 4 shows functional blocks of the remote conference server 14 and functional blocks of the remote conference client 20. FIG. 4 shows remote conference clients 20a and 20b participating in the same screen sharing session.
遠隔会議サーバ14は、遠隔会議サーバ・アプリケーションを実装し、上記画面共有機能に関連して、描画オブジェクト情報通知部110と、描画オブジェクト情報通信部112とを含む。描画オブジェクト情報通信部112は、遠隔会議サーバ14が備えるNICなどを用いて、ネットワーク12上の遠隔会議クライアント20と描画オブジェクトの通信を行うための手段である。描画オブジェクト情報通信部112は、各遠隔会議クライアント20のIPアドレスなどの通信を確立させるための通信情報を管理する。 The remote conference server 14 includes a drawing object information notifying unit 110 and a drawing object information communication unit 112 in association with the screen sharing function. The drawing object information communication unit 112 is a means for communicating a drawing object with the remote conference client 20 on the network 12 using a NIC or the like provided in the remote conference server 14. The drawing object information communication unit 112 manages communication information for establishing communication such as the IP address of each remote conference client 20.
描画オブジェクト情報通知部110は、画面共有セッションを管理しており、上記描画オブジェクト情報通信部112により、一の遠隔会議クライアント(例えば20a)から送信された描画オブジェクトを受信して、同一画面共有セッションに参加する他の遠隔会議クライアント(例えば20b)に転送する。同一画面共有セッションに参加する遠隔会議クライアント20に対し描画オブジェクトを転送することにより、遠隔会議クライアント20間の画面共有が実現される。その他、遠隔会議サーバ14は、同一セッションに参加する遠隔会議クライアント20間で音声、映像などの通信を行う機能を備えるが、詳細な説明は割愛する。 The drawing object information notification unit 110 manages a screen sharing session. The drawing object information communication unit 112 receives a drawing object transmitted from one remote conference client (for example, 20a), and receives the same screen sharing session. To other remote conferencing clients (e.g. 20b). Screen sharing between the remote conference clients 20 is realized by transferring the drawing object to the remote conference clients 20 participating in the same screen sharing session. In addition, the remote conference server 14 has a function of performing communication such as voice and video between the remote conference clients 20 participating in the same session, but detailed description thereof is omitted.
遠隔会議クライアント20は、コンピュータ装置22上で動作する遠隔会議クライアント・アプリケーションを実装する。遠隔会議クライアント20は、上記画面共有機能に関連して、描画オブジェクト情報通信部120と、描画オブジェクト編集部122と、描画オブジェクト情報保存部124と、画像変換部126と、イベント検出部128と、オブジェクト操作通知部130とを含む。 The remote conference client 20 implements a remote conference client application that runs on the computer device 22. In relation to the screen sharing function, the remote conference client 20 includes a drawing object information communication unit 120, a drawing object editing unit 122, a drawing object information storage unit 124, an image conversion unit 126, an event detection unit 128, An object operation notification unit 130.
描画オブジェクト情報保存部124は、遠隔会議クライアント20間で共有される描画オブジェクトを保存する。本実施形態において、共有画面は、背景画像と、0または1以上の描画オブジェクトの集合とを含むコンテナ・オブジェクトによって管理される。図5は、本実施形態における共有画面のコンテナ・オブジェクトのデータ構造を示す。 The drawing object information storage unit 124 stores a drawing object shared between the remote conference clients 20. In the present embodiment, the shared screen is managed by a container object including a background image and a set of zero or one or more drawing objects. FIG. 5 shows the data structure of the container object of the shared screen in this embodiment.
図5に示すコンテナ・オブジェクト150は、該コンテナ・オブジェクトを識別するコンテナ識別情報152と、更新時刻154と、背景画像データ156と、書き込みデータ158とを含む。コンテナ識別情報は、例えば共有されるコンテンツが複数ページからなる場合に、各ページを識別するための情報である。例えば、コンテンツは、複数のコンテナ・オブジェクトの前後関係が定義され、複数のスライドが連結されるプレゼンテーション形式として構成されてもよいし、その他、階層構造やネットワーク構造など他のデータ構造を採用してもよい。なお、説明する実施形態では、説明の便宜上、共有画面が単一のページからなる場合について説明する。 A container object 150 shown in FIG. 5 includes container identification information 152 for identifying the container object, an update time 154, background image data 156, and write data 158. The container identification information is information for identifying each page when the shared content is composed of a plurality of pages, for example. For example, the content may be configured as a presentation format in which the context of a plurality of container objects is defined and a plurality of slides are connected, and other data structures such as a hierarchical structure and a network structure are adopted. Also good. In the embodiment to be described, a case where the shared screen is composed of a single page will be described for convenience of description.
上記背景画像データ156は、その上に描画オブジェクトが書き込まれる下地となる画像であり、例えば、白地、黒地、フレーム付き画像、絵柄、図柄、写真その他の如何なる画像とすることができる。上記背景画像データ156のフォーマットは、特に限定されるものではなく、ビットマップ、JPEG、GIF、TIFFなどの如何なるラスタ・グラフィックスを採用することができ、ベクタ・グラフィックスのフォーマットも妨げられない。 The background image data 156 is an image serving as a background on which a drawing object is written, and can be any image such as a white background, a black background, a framed image, a pattern, a pattern, a photograph, or the like. The format of the background image data 156 is not particularly limited, and any raster graphics such as bitmap, JPEG, GIF, and TIFF can be adopted, and the format of vector graphics is not hindered.
書き込みデータ158は、複数の描画オブジェクト160a〜160zの集合として構成され、各描画オブジェクト160は、複数の属性情報を含み構成される。描画オブジェクトの属性情報は、主として、描画オブジェクトを記述する属性情報と、描画オブジェクトの作成元の主体を識別する主体識別情報とを含む。描画オブジェクトを記述する属性情報としては、図5に示すように、描画オブジェクトの種類(手書きストローク、図形、テキストなど)を表す属性値162a、描画オブジェクトの色を表す属性値162b、描画オブジェクトの位置データを保持する属性情報162c、描画オブジェクトのサイズを表す属性値162dなど、描画オブジェクトの形状および性質を記述する属性情報を含む。描画オブジェクト160は、さらに、オブジェクト操作通知機能の利用の要否を記述する通知要否属性値162fなど、管理用属性情報を含むことができる。 The write data 158 is configured as a set of a plurality of drawing objects 160a to 160z, and each drawing object 160 includes a plurality of attribute information. The attribute information of the drawing object mainly includes attribute information that describes the drawing object and subject identification information that identifies the subject from which the drawing object is created. As the attribute information describing the drawing object, as shown in FIG. 5, the attribute value 162a representing the type of the drawing object (handwritten stroke, figure, text, etc.), the attribute value 162b representing the color of the drawing object, and the position of the drawing object It includes attribute information describing the shape and properties of the drawing object, such as attribute information 162c that holds data and an attribute value 162d that represents the size of the drawing object. The drawing object 160 can further include management attribute information such as a notification necessity attribute value 162f describing whether or not the object operation notification function is required.
主体識別情報は、図5のデータ構造では、作成元属性値162eとして管理される。作成元属性値は、好適には、当該遠隔会議クライアント20を装置固有に識別するクライアント識別子、遠隔会議クライアント20の利用者を固有に識別する利用者識別子、遠隔会議クライアント20が設置されるロケーションを識別するロケーション識別子を挙げることができる。さらに、同一の遠隔会議クライアント20においても、ペン毎に利用者を識別可能であったり、特許文献2の技術のように撮影像から利用者を識別可能である他の実施形態では、遠隔会議クライアント20で使用されるペンを識別するペン識別子、該ペンに紐付けられる利用者識別子、または撮影像から識別された利用者識別子としてもよい。 The subject identification information is managed as a creation source attribute value 162e in the data structure of FIG. The creation source attribute value preferably includes a client identifier that uniquely identifies the remote conference client 20, a user identifier that uniquely identifies the user of the remote conference client 20, and a location where the remote conference client 20 is installed. There may be a location identifier to identify. Furthermore, in the same remote conference client 20, in another embodiment in which a user can be identified for each pen, or a user can be identified from a captured image as in the technique of Patent Document 2, in the remote conference client 20 It is good also as a pen identifier which identifies the pen used by 20, the user identifier linked | related with this pen, or the user identifier identified from the picked-up image.
上記通知要否属性値162fは、オブジェクト操作通知機能を適用するか否かを指定するものである。各描画オブジェクト160の通知要否属性値162fは、例えば、すべてについて「要」としたり、通知要否を切り替えるツールメニューやパレットをタッチするなどの操作に応じて設定したりすることができる。これにより、例えば、利用者は、自身が重要と認識するコメントを書き込む際に、通知要に設定するパレットをタッチしてから、描画オブジェクトを作成することにより、その重要なコメントが勝手に消されていたという事態を好適に防止することができる。 The notification necessity attribute value 162f specifies whether to apply the object operation notification function. The notification necessity attribute value 162f of each drawing object 160 can be set to “necessary” for all, for example, or can be set according to an operation such as touching a tool menu or a palette for switching necessity of notification. Thus, for example, when a user writes a comment that he / she recognizes as important, the user touches the palette to be set as notification required, and then creates the drawing object, so that the important comment is deleted without permission. It is possible to suitably prevent the situation of having occurred.
再び図4を参照すると、描画オブジェクト情報通信部120は、ネットワークI/F54などを用いて、ネットワーク12上の遠隔会議サーバ14と描画オブジェクトの通信を行うための手段である。描画オブジェクト情報通信部120は、遠隔会議サーバ14のIPアドレスなどを含む、遠隔会議サーバ14との通信を確立させるための通信情報を管理する。描画オブジェクト情報通信部120は、当該遠隔会議クライアント20において作成、変更または削除された描画オブジェクトを遠隔会議サーバ14へ送信する。描画オブジェクト情報通信部120は、また、他のクライアント20において作成、変更または削除された描画オブジェクトを、遠隔会議サーバ14を経由して受信する。 Referring to FIG. 4 again, the drawing object information communication unit 120 is a means for communicating the drawing object with the remote conference server 14 on the network 12 using the network I / F 54 or the like. The drawing object information communication unit 120 manages communication information for establishing communication with the remote conference server 14 including the IP address of the remote conference server 14 and the like. The drawing object information communication unit 120 transmits the drawing object created, changed, or deleted in the remote conference client 20 to the remote conference server 14. The drawing object information communication unit 120 also receives drawing objects created, changed, or deleted in other clients 20 via the remote conference server 14.
描画オブジェクト編集部122は、当該遠隔会議クライアント20のタッチパネル26を介して描画オブジェクトの作成、変更または削除の操作が行われると、該描画オブジェクトの情報を、描画オブジェクト情報保存部124に保存し、描画オブジェクト情報通信部120により遠隔会議サーバ14へ送信させる。描画オブジェクト編集部122は、また、描画オブジェクト情報通信部120により遠隔会議サーバ14から他のクライアント20で追加、変更、削除された描画オブジェクトの情報を受信して、描画オブジェクト情報保存部124に保存する。 When a drawing object is created, changed, or deleted through the touch panel 26 of the remote conference client 20, the drawing object editing unit 122 stores the drawing object information in the drawing object information storage unit 124. The drawing object information communication unit 120 transmits the information to the remote conference server 14. The drawing object editing unit 122 also receives drawing object information added, changed, or deleted by the other client 20 from the remote conference server 14 via the drawing object information communication unit 120 and stores the information in the drawing object information storage unit 124. To do.
なお、上記描画オブジェクトの作成とは、共有画面に新たな描画オブジェクトを追加することをいう。描画オブジェクト編集部122は、描画オブジェクトの作成が行われると、描画オブジェクト情報保存部124に新規保存を行う。上記描画オブジェクトの変更とは、共有画面中の描画オブジェクトの位置移動、リサイズ、回転、変形、歪み、属性(色、線種、筆、太さなどを含む。)の変更、前景後景の移動、描画オブジェクトに対する追記、部分削除、部分移動など種々の変更操作をいう。描画オブジェクト編集部122は、描画オブジェクトの変更が行われると、描画オブジェクト情報保存部124に上書き保存を行う。 The creation of the drawing object means adding a new drawing object to the shared screen. When the drawing object is created, the drawing object editing unit 122 newly stores it in the drawing object information storage unit 124. The above drawing object changes include moving, resize, rotating, deforming, distorting, changing attributes (including color, line type, brush, thickness, etc.), moving the foreground and background on the shared screen. This refers to various changing operations such as additional writing, partial deletion, and partial movement of a drawing object. When the drawing object is changed, the drawing object editing unit 122 overwrites and saves the drawing object information storage unit 124.
また、描画オブジェクトの削除とは、共有画面から既存の描画オブジェクトを取り除くことをいう。描画オブジェクト編集部122は、描画オブジェクトの削除が行われると、既存の描画オブジェクトに削除フラグを設定して上書き保存し、または描画オブジェクト事態を消去する。また、描画オブジェクトが遠隔会議サーバ14に送信されるタイミングは、特に限定されるものではない。例えば手書きストロークを描画してペンアップするなど描画オブジェクトに対する操作が一通り完了した時に送信する構成としてもよい。あるいは、描画オブジェクト操作中に一定インターバル毎の状態を送信する構成としてもよい。 Deletion of a drawing object means removing an existing drawing object from the shared screen. When the drawing object is deleted, the drawing object editing unit 122 sets a deletion flag to the existing drawing object and overwrites it, or deletes the drawing object situation. The timing at which the drawing object is transmitted to the remote conference server 14 is not particularly limited. For example, a configuration may be adopted in which a handwritten stroke is drawn and a pen-up is performed, for example, when a complete operation on the drawing object is completed. Or it is good also as a structure which transmits the state for every fixed interval during drawing object operation.
イベント検出部128は、座標検出装置を介して行われた共有画面に対する入力操作に応答して、事前登録されたイベントを検出し、対応する処理を呼び出す手段である。なお、本遠隔会議アプリケーションにおいては、描画オブジェクトに対する操作、パレットの選択、画面の切り替えなど種々のイベントに応答して種々の処理が行われるが、本イベント検出部128は、操作通知機能および作成主体表示機能に関連する事前登録されたイベントを検出して、操作通知機能および作成主体表示機能を呼び出す手段である。なお、操作通知機能および作成主体表示機能に関連して、どのようなイベントが登録されるかについては、詳細を後述する。 The event detection unit 128 is a means for detecting a pre-registered event and calling a corresponding process in response to an input operation on the shared screen performed via the coordinate detection device. In this remote conference application, various processes are performed in response to various events such as operations on drawing objects, palette selection, screen switching, etc. The event detection unit 128 has an operation notification function and a creation subject. It is a means for detecting a pre-registered event related to the display function and calling the operation notification function and the creation subject display function. Details of events registered in relation to the operation notification function and the creation subject display function will be described later.
オブジェクト操作通知部130は、イベント検出部128により操作通知機能に関連して事前登録された操作イベントが検出されたことに応答して呼び出され、メッセージを発行する発行手段である。メッセージは、該操作イベントに対応する描画オブジェクトの作成元属性値に応じた遠隔会議クライアント(例えば20b)に対し発行される。また、メッセージの内容は、当該遠隔会議クライアント(例えば20a)に関連する主体が、メッセージ送信先の他の遠隔会議クライアント(例えば20b)に関連する作成主体により作成された描画オブジェクトに対して行う操作内容を通知するものである。 The object operation notification unit 130 is an issuing unit that is called in response to detection of an operation event registered in advance in association with the operation notification function by the event detection unit 128 and issues a message. The message is issued to the remote conference client (for example, 20b) corresponding to the drawing object creation source attribute value corresponding to the operation event. The message content is an operation performed by a subject related to the remote conference client (for example, 20a) on a drawing object created by a creating subject related to another remote conference client (for example, 20b) to which the message is sent. The contents are notified.
なお、オブジェクト操作通知部130が発行するメッセージは、描画オブジェクトの通信とは別経路で、遠隔会議サーバ14を経由して、または経由せず直接に送信することができる。しかしながら、メッセージの送信方法は、特に限定されるものではなく、描画オブジェクトの通信とともに、描画オブジェクトの属性情報に乗せて送信してもよい。 Note that the message issued by the object operation notifying unit 130 can be directly transmitted via the remote conference server 14 or not via a route different from the communication of the drawing object. However, the transmission method of the message is not particularly limited, and it may be transmitted along with the drawing object attribute information along with the drawing object communication.
画像変換部126は、共有画面を規定するコンテナ・オブジェクトに従って、ディスプレイ24に表示させる表示画像データを生成する手段である。画像変換部126は、描画オブジェクト情報保存部124に保存されている描画オブジェクト群160a〜160zを読み出し、背景画像に合成することによって、表示画像データを生成する。また、画像変換部126は、ツールメニュー、パレットなど電子黒板アプリケーションで必要なGUI(グラフィカル・ユーザ・インタフェース)部品の表示処理を行う。 The image conversion unit 126 is means for generating display image data to be displayed on the display 24 in accordance with a container object that defines a shared screen. The image conversion unit 126 generates display image data by reading the drawing object groups 160a to 160z stored in the drawing object information storage unit 124 and combining them with the background image. In addition, the image conversion unit 126 performs display processing of GUI (graphical user interface) parts necessary for the electronic blackboard application such as a tool menu and a palette.
本実施形態の画像変換部126は、さらに、イベント検出部128により作成主体表示機能に関連して事前登録されたイベントが検出されたことに応答して、事前指定された表示条件にて作成主体を表す付加表示を行う。なお、付加表示の具体例および事前指定される表示条件については詳細を後述する。 In addition, the image conversion unit 126 according to the present embodiment further includes a creation subject in accordance with a display condition designated in advance in response to the event detection unit 128 detecting a pre-registered event related to the creation subject display function. An additional display indicating is performed. A specific example of additional display and display conditions designated in advance will be described in detail later.
本実施形態の画像変換部126は、さらに、上記操作通知機能に関連し、他の遠隔会議クライアント(例えば20b)から上記メッセージを受信したことに応答して、事前指定された表示条件にて、操作内容を表す画面表示をディスプレイ24の画面上に行う。上記操作内容を表す画面表示は、メッセージ送信元の遠隔会議クライアント(例えば20b)に関連する主体が、当該遠隔会議クライアント(例えば20a)に関連する主体により作成された描画オブジェクトに対して行う操作内容を示すものである。これにより、作成元主体が認識しないうちに勝手に他の主体により描画オブジェクトに対し操作が行われていたという事態が発生することを低減することができる。 The image conversion unit 126 of the present embodiment further relates to the operation notification function, and in response to receiving the message from another remote conference client (for example, 20b), in a display condition specified in advance, A screen display representing the operation content is performed on the screen of the display 24. The screen display indicating the operation content is the operation content that the subject related to the remote conference client (for example, 20b) as the message transmission source performs on the drawing object created by the subject related to the remote conference client (for example, 20a). Is shown. As a result, it is possible to reduce the occurrence of a situation in which an operation has been performed on a drawing object by another subject without permission by the creator.
以下、図6〜図9を参照して、作成主体表示機能についてより詳細に説明する。図6は、第1の実施形態における作成主体表示機能の設定画面を例示する。なお、以下の説明では、各主体は、遠隔会議クライアント20自身を指し、設置される拠点名により表されるものとする。図6に示す拠点表示設定画面200は、複数のセクション202〜206と、OKボタン208と、キャンセルボタン210とを含む。拠点表示設定画面200は、例えば、当該遠隔会議クライアント20のシステム管理画面などから呼び出される。 Hereinafter, the creation subject display function will be described in more detail with reference to FIGS. FIG. 6 illustrates a setting screen for the creation subject display function in the first embodiment. In the following description, each subject refers to the remote conference client 20 itself, and is represented by the name of the installed base. The base display setting screen 200 shown in FIG. 6 includes a plurality of sections 202 to 206, an OK button 208, and a cancel button 210. The site display setting screen 200 is called from, for example, the system management screen of the remote conference client 20.
拠点表示設定画面200中の第1のセクション202は、拠点表示処理を呼び出すために登録される1以上の主体表示イベントを設定するセクションである。登録可能な主体表示イベントとしては、図6にチェックボックスとして示すように、オブジェクト作成中212a、オブジェクト作成完了時212b、アイドル時212c、オブジェクト・ポインタオーバ時212d、描画中ストローク接近時212e、消去モード時212f、消去モード中オブジェクト・ポインタオーバ時212g、描画オブジェクト消去時212h、選択モード時212i、およびオブジェクト選択時212jを挙げることができる。 The first section 202 in the base display setting screen 200 is a section for setting one or more subject display events registered for calling the base display processing. As the subject display events that can be registered, as shown as check boxes in FIG. 6, object creation 212a, object creation complete 212b, idle 212c, object pointer over 212d, drawing stroke approaching 212e, erase mode The time 212f, the object pointer over 212g during the erasing mode, the drawing object erasing 212h, the selection mode 212i, and the object selection 212j.
オブジェクト作成中212aは、描画オブジェクトが作成されているときに発生するイベントである。オブジェクト作成完了時212bは、例えばペンアップされて描画オブジェクトの作成が完了したときに発生するイベントである。アイドル時212cは、一定期間入力操作が行われなかったときに発生するイベントである。オブジェクト・ポインタオーバ時212dは、ポインタが、描画オブジェクトが描画されている領域と重なったときに発生するイベントである。描画中ストローク接近時212eは、描画中のストロークが、特定の描画オブジェクトが描画されている領域の所定範囲内に近づいたときに発生するイベントである。 The object creation 212a is an event that occurs when a drawing object is created. The object creation completion time 212b is an event that occurs when, for example, pen-up is completed and creation of a drawing object is completed. The idle time 212c is an event that occurs when an input operation is not performed for a certain period. The object pointer over 212d is an event that occurs when the pointer overlaps the area where the drawing object is drawn. The drawing stroke approaching time 212e is an event that occurs when the drawing stroke approaches the predetermined range of the area where the specific drawing object is drawn.
消去モード時212fは、ツールメニュー等により消去モードが選択されたときに発生するイベントである。消去モード中オブジェクト・ポインタオーバ時212gは、消去モード中、ポインタが描画オブジェクトの描画されている領域と重なったときに発生するイベントである。描画オブジェクト消去時212hは、描画オブジェクトを消去したとき発生するイベントである。選択モード時212iは、ツールメニュー等により選択モードが選択されたときに発生するイベントである。オブジェクト選択時212jは、描画オブジェクトが選択されたときに発生するイベントである。 The erase mode 212f is an event that occurs when the erase mode is selected from the tool menu or the like. The object pointer over 212g during the erasing mode is an event that occurs when the pointer overlaps the area where the drawing object is drawn during the erasing mode. The drawing object erasure 212h is an event that occurs when the drawing object is erased. The selection mode 212i is an event that occurs when the selection mode is selected by a tool menu or the like. The object selection time 212j is an event that occurs when a drawing object is selected.
なお、作成主体表示機能を呼び出すために事前登録される主体表示イベントは、特に限定されるものではなく、図6に例示されるイベントの他にも、位置移動モード、リサイズ・モードなど他のモードに移行されたこと、他のモード中に描画オブジェクトが選択されたこと、他のモード中に描画オブジェクトに対する操作が確定したことをそれぞれイベントとして登録してもよい。 Note that the subject display event registered in advance to call the creation subject display function is not particularly limited, and other modes such as the position movement mode and the resize mode are available in addition to the events illustrated in FIG. It may be registered as an event that the process has shifted to (2), that a drawing object has been selected in another mode, and that an operation on the drawing object has been confirmed in another mode.
拠点表示設定画面200中の第2のセクション204は、拠点表示を行う表示条件として表示方法を事前指定するセクションである。事前指定可能な表示方法としては、オブジェクトの色変更214a、オブジェクトへのピン表示214bおよび拠点情報のパネル表示214cが例示される。オブジェクト色変更214aは、オブジェクト本来の色を、拠点に対応付けられる色に変更して表示する表示方法である。オブジェクトへのピン表示214bは、拠点に対応付けられる色のピンを付して表示する表示方法である。拠点情報パネル表示214cは、拠点を表す拠点情報をパネル表示する表示方法である。なお、上記拠点情報は、ここでは拠点名を用いているが、拠点の利用者名など主体を明示する他の情報を用いてもよい。また、拠点情報に付随して、作成時刻など他の属性値を付加表示に含めてもよい。 The second section 204 in the site display setting screen 200 is a section for predesignating a display method as a display condition for performing site display. Examples of display methods that can be designated in advance include an object color change 214a, a pin display 214b on the object, and a panel display 214c of base information. The object color change 214a is a display method in which the original color of the object is changed to a color associated with the base and displayed. The pin display 214b to the object is a display method in which a pin having a color associated with a base is attached and displayed. The base information panel display 214c is a display method for displaying base information representing a base on a panel. In addition, although the base name is used here as the base information, other information that clearly indicates the subject, such as the user name of the base, may be used. In addition, other attribute values such as creation time may be included in the additional display accompanying the base information.
拠点表示設定画面200中の第3のセクション206は、拠点表示を行う表示条件として表示位置を事前指定するセクションである。事前指定可能な表示位置としては、特定オブジェクトに関連付けられるオブジェクト始点216a、オブジェクト終点216b、オブジェクト中心216cおよびオブジェクト重心216dを挙げることができる。オブジェクト始点216aおよびオブジェクト終点216bは、それぞれ、描画オブジェクトの位置データにおける始点座標および終点座標を基準に表示位置が決定される。オブジェクト中心216cおよびオブジェクト重心216dは、位置データを構成する座標点の配列から計算された中心点および重心点を基準に表示位置が決定される。 A third section 206 in the site display setting screen 200 is a section for specifying a display position in advance as a display condition for performing site display. Examples of display positions that can be designated in advance include an object start point 216a, an object end point 216b, an object center 216c, and an object centroid 216d associated with a specific object. The display positions of the object start point 216a and the object end point 216b are determined based on the start point coordinates and the end point coordinates in the position data of the drawing object, respectively. The display positions of the object center 216c and the object gravity center 216d are determined based on the center point and the gravity center calculated from the arrangement of coordinate points constituting the position data.
事前指定可能な表示位置としては、さらに、画面に関連する画面上中央218a、画面下中央218b、画面右中央218c、画面左中央218d、画面右上218e、画面左上218f、画面右下218gおよび画面左下218hを挙げることができる。 The display positions that can be designated in advance include the screen center 218a, the screen center 218b, the screen center 218c, the screen center 218d, the screen top 218e, the screen top 218f, the screen bottom 218g, and the screen bottom 218g. 218h.
なお、第3のセクション206の選択可能な選択肢は、第2のセクション204で選択されたオプションに応じて変更してもよい。例えば、オブジェクトへのピン表示214bは、特定の描画オブジェクトに関連付けて表示することが好ましいことから、特定オブジェクトに関連して表示する選択肢216a〜216dの中から選択するようにすることができる。また、オブジェクト色変更214aは、オブジェクトに固定されていることから、第3のセクション206を使用しないようにすることもできる。 Note that the selectable options in the third section 206 may be changed according to the option selected in the second section 204. For example, since the pin display 214b on the object is preferably displayed in association with a specific drawing object, it can be selected from the options 216a to 216d to be displayed in association with the specific object. Further, since the object color change 214a is fixed to the object, the third section 206 can be prevented from being used.
第1のセクション202で事前登録する1以上のイベントが選択され、第2のセクション204で事前指定する表示方法が選択され、第3のセクション206で事前指定する表示位置が選択された上で、OKボタン208がタッチされると、設定内容に応じて主体表示イベントの事前登録および表示方法・表示位置の事前指定が完了する。なお、ここで設定される内容は、遠隔会議クライアント20間で共有してもよいし、共有せずに各遠隔会議クライアント20で独立して設定されてもよい。 One or more events to be pre-registered in the first section 202 are selected, a display method to be specified in advance in the second section 204 is selected, and a display position to be specified in advance in the third section 206 is selected. When the OK button 208 is touched, pre-registration of the subject display event and pre-designation of the display method and display position are completed according to the setting contents. The contents set here may be shared among the remote conference clients 20 or may be set independently for each remote conference client 20 without sharing.
上述した事前登録可能な主体表示イベントは、特定の描画オブジェクトに対するイベントと、特定の描画オブジェクトとは直接関係のないイベントとに分類することができる。図6中、アイドル時212c、消去モード時212f、選択モード時212iは、ツールメニューやパレットに対するイベントであり、特定の描画オブジェクトと直接関係のないイベントに該当する。以下、図7および図8を参照して、特定の描画オブジェクトに対するイベントに対する処理フロー、および描画オブジェクトと直接関係のないイベントに対する処理フローについて、それぞれ説明する。 The pre-registerable subject display events described above can be classified into events for specific drawing objects and events not directly related to specific drawing objects. In FIG. 6, the idle time 212c, the erase mode time 212f, and the selection mode time 212i are events for the tool menu and the palette, and correspond to events that are not directly related to a specific drawing object. Hereinafter, with reference to FIGS. 7 and 8, a processing flow for an event for a specific drawing object and a processing flow for an event not directly related to the drawing object will be described.
図7は、事前登録された描画オブジェクトに対する主体表示イベントに応答して実行される拠点表示処理を示すフローチャートである。図7に示す処理は、イベント検出部128が事前登録されたイベントを検知したことに応答して、ステップS100から開始される。ステップS101では、画像変換部126は、検知された事前登録イベントに対応する描画オブジェクトについて、描画オブジェクト情報保存部124から作成元属性値を取得する。ステップS102では、画像変換部126は、検知された事前登録イベントに対応する描画オブジェクトの作成元属性値を用いて、作成元を表す付加表示を事前指定された表示方法にて表示位置に表示させる。 FIG. 7 is a flowchart showing a base display process executed in response to a subject display event for a pre-registered drawing object. The process shown in FIG. 7 is started from step S100 in response to the event detection unit 128 detecting a pre-registered event. In step S <b> 101, the image conversion unit 126 acquires a creation source attribute value from the drawing object information storage unit 124 for the drawing object corresponding to the detected pre-registration event. In step S102, the image conversion unit 126 displays an additional display representing the creation source at the display position by using a display method designated in advance using the creation source attribute value of the drawing object corresponding to the detected pre-registration event. .
ステップS103では、表示解除イベントの発生を待ち受け、表示解除イベントが通知されるまでの間(NOの間)、ステップS103をループさせる。ここで、表示解除イベントとは、上記付加表示を消去するイベントであり、特に限定されるものではないが、所定のタイマーが満了したこと、ポインタオーバが解除されたこと、またはモードが切り替わったことなどを例示することができる。例えば、事前登録イベント「オブジェクト・ポインタオーバ時」であれば、当該描画オブジェクトの描画領域からポインタが放れたタイミングを表示解除イベントとすることができる。その他、イベント「消去モード時」であれば、消去モードとなってから一定時間経過したタイミング、消去モードから他のモードに切り替わるタイミングを表示解除イベントとすることができる。 In step S103, the generation of a display cancellation event is awaited, and step S103 is looped until the display cancellation event is notified (during NO). Here, the display cancellation event is an event for erasing the additional display, and is not particularly limited. However, the predetermined timer has expired, the pointer over has been canceled, or the mode has been switched. Etc. can be illustrated. For example, in the case of a pre-registration event “when object pointer is over”, the timing at which the pointer is released from the drawing area of the drawing object can be set as a display cancellation event. In addition, if the event is “in erasure mode”, the display cancellation event can be a timing when a certain time has elapsed since the erasure mode was entered, and a timing when the erasure mode is switched to another mode.
ステップS103で、イベント検出部128から表示解除イベントの発生が通知された場合(YES)は、ステップS104へ処理を進める。ステップS104では、画像変換部126は、上記付加表示をフェードアウトするなど付加表示を解除する処理を行い、ステップS105で、本事前登録イベントに対応した処理を終了させる。 In step S103, when the event detection unit 128 notifies the occurrence of a display cancellation event (YES), the process proceeds to step S104. In step S104, the image conversion unit 126 performs a process of canceling the additional display such as fading out the additional display, and ends the process corresponding to the pre-registration event in step S105.
図9(A)および(B)は、図7に示す処理により表示される共有画面を例示する。図9(A)は、事前登録イベント「消去モード中オブジェクト・ポインタオーバ時」に応答して、表示方法「拠点情報パネル表示」にて、表示位置「画面左下」に付加表示を行うという設定において表示される画面を例示する。図9(A)に示す画面230は、ツールメニュー232a〜232cのうちの消去モード232bが選択され、ポインタ236が手書き描画オブジェクト234の描画領域に重なっている状態を示す。図9(A)には、事前登録イベントに対応して、手書き描画オブジェクト234の作成元を示す拠点表示パネル238が表示されている。 9A and 9B exemplify the shared screen displayed by the process shown in FIG. FIG. 9A shows a setting in which additional display is performed at the display position “bottom left of the screen” in the display method “base information panel display” in response to the pre-registration event “object pointer over in erasing mode”. The screen displayed is illustrated. A screen 230 shown in FIG. 9A shows a state where the erase mode 232b is selected from the tool menus 232a to 232c and the pointer 236 overlaps the drawing area of the handwritten drawing object 234. In FIG. 9A, a base display panel 238 indicating the creation source of the handwritten drawing object 234 is displayed corresponding to the pre-registration event.
図9(B)は、事前登録イベント「オブジェクト選択時」に応答して、表示方法「オブジェクト色変更」にて付加表示を行うという設定において表示される画面を例示する。図9(B)に示す画面240は、ツールメニュー242a〜242cのうちの選択モード242cが選択され、手書き描画オブジェクト244が選択され強調表示246がなされている状態を示す。図9(B)には、事前登録イベントに対応して、手書き描画オブジェクト244のストローク線248の色が、手書き描画オブジェクト244の作成元を示す色に変更されている。図9(A)および(B)に示す追加表示により、操作者は、特定描画オブジェクトを選択した際などに、特定描画オブジェクトの作成元を把握することができる。 FIG. 9B illustrates a screen displayed in a setting in which additional display is performed by the display method “change object color” in response to the pre-registration event “when object is selected”. A screen 240 shown in FIG. 9B shows a state in which the selection mode 242c is selected from the tool menus 242a to 242c, the handwritten drawing object 244 is selected, and the highlighted display 246 is displayed. In FIG. 9B, the color of the stroke line 248 of the handwritten drawing object 244 is changed to a color indicating the creation source of the handwritten drawing object 244 in response to the pre-registration event. With the additional display shown in FIGS. 9A and 9B, the operator can grasp the creation source of the specific drawing object when the specific drawing object is selected.
図8は、事前登録された描画オブジェクトと直接関係のない主体表示イベントに応答して実行される拠点表示処理を示すフローチャートである。図8に示す処理は、イベント検出部128が事前登録されたイベントを検知したことに応答して、ステップS200から開始される。ステップS201〜ステップS204のループでは、描画オブジェクト毎にステップS202およびステップS203の処理が実行される。なお、該ループでは、共有画面に現在表示されているすべての描画オブジェクトを対象としてもよいが、最も新しく作成されたものから所定順位以内の描画オブジェクトのみを付加表示の対象としてもよい。 FIG. 8 is a flowchart showing a base display process executed in response to a subject display event not directly related to a pre-registered drawing object. The process shown in FIG. 8 is started from step S200 in response to the event detection unit 128 detecting a pre-registered event. In the loop from step S201 to step S204, the processing of step S202 and step S203 is executed for each drawing object. In this loop, all drawing objects currently displayed on the shared screen may be targeted, but only the drawing objects within the predetermined order from the most recently created may be targeted for additional display.
ステップS202では、画像変換部126は、描画オブジェクト情報保存部124から各描画オブジェクトの作成元属性値を取得する。ステップS203では、画像変換部126は、各描画オブジェクトの作成元属性値を用いて、作成元を表す付加表示を事前指定された表示方法にて表示位置に表示させる。 In step S202, the image conversion unit 126 acquires the creation source attribute value of each drawing object from the drawing object information storage unit 124. In step S203, the image conversion unit 126 causes an additional display representing the creation source to be displayed at the display position by a display method designated in advance using the creation source attribute value of each drawing object.
ステップS201〜ステップS204のループを抜けると、ステップS205へ処理が進められる。ステップS205では、画像変換部126は、表示解除イベントの発生を待ち受け、表示解除イベントが通知されるまでの間(NOの間)、ステップS205をループさせる。ステップS205で、イベント検出部128から表示解除イベントの発生が通知された場合(YES)は、ステップS206へ処理を進める。ステップS206では、画像変換部126は、上記付加表示を解除する処理を行い、ステップS207で、本事前登録イベントに対応した処理を終了させる。 After exiting the loop from step S201 to step S204, the process proceeds to step S205. In step S205, the image conversion unit 126 waits for the occurrence of a display cancellation event, and loops step S205 until the display cancellation event is notified (during NO). In step S205, when the event detection unit 128 notifies the occurrence of a display cancellation event (YES), the process proceeds to step S206. In step S206, the image conversion unit 126 performs a process of canceling the additional display, and ends the process corresponding to the pre-registration event in step S207.
図9(C)は、事前登録イベント「消去モード時」に応答して、表示方法「オブジェクトへのピン表示」にて、表示位置「オブジェクト終点」に付加表示を行うという設定において表示される画面を例示する。図9(C)に示す画面250は、ツールメニュー252a〜252cのうちの消去モード252bが選択された状態を示す。図9(C)には、事前登録イベントに対応して、2つの手書きオブジェクト254a,254bに対応して、作成元に対応する色の2つのピン表示256a,256bが一斉表示されている。 FIG. 9C shows a screen that is displayed in a setting in which additional display is performed at the display position “object end point” by the display method “pin display on object” in response to the pre-registration event “in erase mode”. Is illustrated. A screen 250 shown in FIG. 9C shows a state in which the erase mode 252b is selected from the tool menus 252a to 252c. In FIG. 9C, in correspondence with the pre-registration event, two pin displays 256a and 256b of colors corresponding to the creation source are simultaneously displayed corresponding to the two handwritten objects 254a and 254b.
図9(C)に示すピン表示により、操作者は、消去モードなどを選択した際に、表示中の各描画オブジェクトの作成元を把握することができる。なお、図8に示す処理フローは、描画オブジェクトに関連づけて表示する表示方法および表示位置が指定される場合に好適に用いることができる。 With the pin display shown in FIG. 9C, when the operator selects an erase mode or the like, the operator can grasp the creation source of each drawing object being displayed. Note that the processing flow shown in FIG. 8 can be suitably used when a display method and a display position to be displayed in association with a drawing object are designated.
以下、図10〜図12を参照して、オブジェクト操作通知機能について、より詳細に説明する。図10は、第1の実施形態におけるオブジェクト操作通知機能の設定画面を例示する。オブジェクト操作通知設定画面260は、例えば遠隔会議クライアント20のシステム管理画面などから呼び出される。また、説明する実施形態において、オブジェクト操作通知設定画面260は、操作内容の通知を受信し、表示を行う通知受信側としての設定画面である。通知発行側としては、オブジェクト操作通知の可能性のある操作イベントが予め登録されており、通知受信側で、オブジェクト操作通知設定画面260を用いて、通知表示を実施する所望の通知受信イベントを登録するものとする。 Hereinafter, the object operation notification function will be described in more detail with reference to FIGS. FIG. 10 illustrates a setting screen for the object operation notification function according to the first embodiment. The object operation notification setting screen 260 is called from the system management screen of the remote conference client 20, for example. In the embodiment to be described, the object operation notification setting screen 260 is a setting screen as a notification receiving side that receives and displays a notification of operation contents. As the notification issuing side, an operation event having a possibility of object operation notification is registered in advance, and the notification receiving side registers a desired notification receiving event for performing notification display using the object operation notification setting screen 260. It shall be.
図10に示すオブジェクト操作通知設定画面260は、複数のセクション262〜266と、OKボタン268と、キャンセルボタン270とを含む。第1のセクション262は、オブジェクト操作通知を行うために登録される1以上の通知受信イベントを設定するセクションである。登録可能な通知受信イベントとしては、図10にチェックボックスとして示すように、オブジェクト選択通知受信時272a、オブジェクト消去通知受信時272b、オブジェクト編集通知受信時272c、消去モード中オブジェクト・ポインタオーバ通知受信時272dを挙げることができる。 The object operation notification setting screen 260 illustrated in FIG. 10 includes a plurality of sections 262 to 266, an OK button 268, and a cancel button 270. The first section 262 is a section for setting one or more notification reception events registered for performing object operation notification. As a notification reception event that can be registered, as shown as a check box in FIG. 10, when an object selection notification is received 272a, an object deletion notification is received 272b, an object edit notification is received 272c, and an object pointer over notification is received during deletion mode. 272d.
オブジェクト選択通知受信時272aは、当該遠隔会議クライアント20が作成元である描画オブジェクトに対し、他のクライアントにより選択操作が行われた場合になされる通知を受信したことに応答して発生するイベントである。オブジェクト消去通知受信時272bは、当該遠隔会議クライアント20が作成元である描画オブジェクトに対し他のクライアントにより消去操作が行われた場合になされる通知を受信したことに応答して発生するイベントである。 When the object selection notification is received, 272a is an event that occurs in response to receiving a notification that is made when a selection operation is performed by another client on the drawing object that is created by the remote conference client 20. is there. The object erasure notification reception time 272b is an event that occurs in response to receiving a notification that is made when another client performs an erasure operation on the drawing object that is created by the remote conference client 20. .
オブジェクト編集通知受信時272cは、当該遠隔会議クライアント20が作成元である描画オブジェクトに対し他のクライアントにより編集操作(リサイズ、位置移動などを含む。)が行われた場合になされる通知を受信したことに応答して発生するイベントである。消去モード中オブジェクト・ポインタオーバ通知受信時272dは、当該遠隔会議クライアント20が作成元である描画オブジェクトに対し他のクライアントにおいて消去モード中に描画領域にポインタを重ねられた場合になされる通知を受信したことに応答して発生するイベントである。 At the time of receiving the object editing notification 272c, a notification is received when an editing operation (including resizing, position movement, etc.) is performed by another client on the drawing object from which the remote conference client 20 is created. It is an event that occurs in response. When the object pointer over notification is received during the erasure mode, 272d receives a notification that is made when the remote conference client 20 is placed on the drawing area while the erasing mode is being performed in another client by the other client. It is an event that occurs in response to the event.
なお、オブジェクト操作通知機能を呼び出すために事前登録される通知受信イベントは、特に限定されるものではなく、その他、描画中のストロークが描画オブジェクトに接近したこと、描画オブジェクトにストロークが重ね書きされたこと、あるいは描画オブジェクトが変形されたこと、その色が変更されたこと、追記されたこと、部分削除されたこと、部分移動されたことなど、描画オブジェクトに対するあらゆる編集操作に対応する通知を受信したことを上記イベントとして登録することができる。 The notification reception event registered in advance to call the object operation notification function is not particularly limited. In addition, the drawing stroke has approached the drawing object, and the drawing object has been overwritten. Or received notifications corresponding to any editing operations on the drawing object, such as that the drawing object was deformed, its color changed, added, partially deleted, or partially moved Can be registered as the event.
第2のセクション264は、操作内容の表示を行う表示条件として表示方法を事前指定するセクションである。事前指定可能な表示方法としては、図10に示す例では、操作内容パネル表示274が例示される。操作内容パネル表示274は、描画オブジェクトに対し操作が行われている旨のメッセージを事前指定位置にパネル表示する表示方法である。その他、図示しないが、ダイアログ表示、描画オブジェクトに紐付けたポップアップ表示など他の表示方法を選択肢に含めてもよい。 The second section 264 is a section in which a display method is designated in advance as a display condition for displaying the operation content. As a display method that can be designated in advance, the operation content panel display 274 is exemplified in the example shown in FIG. The operation content panel display 274 is a display method in which a message indicating that an operation is being performed on a drawing object is displayed on a panel at a predesignated position. In addition, although not shown, other display methods such as dialog display and pop-up display associated with the drawing object may be included in the options.
第3のセクション266は、操作内容の表示を行う表示条件として表示位置を事前指定するセクションである。事前指定可能な表示位置としては、画面に関連して表示される、画面上中央276a、画面下中央276b、画面右中央276c、画面左中央276d、画面右上276e、画面左上276f、画面右下276gおよび画面左下276hを挙げることができる。その他、図6に示すような特定オブジェクトに関連付けて表示させる選択肢があってもよい。 The third section 266 is a section in which a display position is designated in advance as a display condition for displaying operation contents. Display positions that can be designated in advance include the screen upper center 276a, screen lower center 276b, screen right center 276c, screen left center 276d, screen upper right 276e, screen upper left 276f, and screen lower right 276g. And the lower left 276h of the screen. In addition, there may be options to be displayed in association with a specific object as shown in FIG.
第1のセクション262で事前登録する1以上のイベントが選択され、第2のセクション264で事前指定する表示方法が選択され、第3のセクション266で事前指定する表示位置が選択され、その後OKボタン268がタッチされると、設定内容に応じて通知受信イベントの事前登録および表示方法・表示位置の事前指定が完了する。なお、ここで設定される内容は、遠隔会議クライアント20間で共有してもよし、各遠隔会議クライアント20で独立して設定されてもよい。 One or more events to be pre-registered are selected in the first section 262, a display method to be pre-specified in the second section 264 is selected, a display position to be pre-specified in the third section 266 is selected, and then an OK button is selected. When 268 is touched, pre-registration of the notification reception event and pre-designation of the display method and display position are completed according to the setting contents. The contents set here may be shared among the remote conference clients 20 or may be set independently for each remote conference client 20.
図11は、第1の実施形態における、事前登録されたイベントに応答して実行されるオブジェクト操作通知処理および操作通知表示処理を示すフローチャートである。図11に示す処理は、イベント検出部128が事前登録されたイベントを検知したことに応答して、ステップS300から開始される。ここで、検知されるイベントは、オブジェクト操作通知の可能性のある種々の操作イベントである。なお、図11において、ステップS300〜S308の処理は、通知発行側の処理フローを示し、ステップS400〜S404の処理は、通知受信側の処理フローを示す。 FIG. 11 is a flowchart showing object operation notification processing and operation notification display processing executed in response to a pre-registered event in the first embodiment. The process shown in FIG. 11 is started from step S300 in response to the event detection unit 128 detecting a pre-registered event. Here, the detected events are various operation events that may be notified of object operation. In FIG. 11, the processes in steps S300 to S308 indicate the process flow on the notification issue side, and the processes in steps S400 to S404 indicate the process flow on the notification reception side.
ステップS301では、オブジェクト操作通知部130は、検知された操作イベントに対応する描画オブジェクトの通知要否属性値162fを参照し、ステップS302で、通知が必要か否かを判定する。ステップS302で、通知が必要であると判定された場合(YES)は、ステップS303へ処理を進める。ステップS303では、オブジェクト操作通知部130は、上記描画オブジェクトの作成元属性値162eを参照し、ステップS304で、作成元が当該遠隔会議クライアント20と異なるか否かを判定する。ステップS304で、異なる作成元の描画オブジェクトであると判定された場合(YES)は、ステップS305へ処理を進める。 In step S301, the object operation notifying unit 130 refers to the drawing necessity notification attribute value 162f of the drawing object corresponding to the detected operation event, and determines whether or not notification is necessary in step S302. If it is determined in step S302 that notification is necessary (YES), the process proceeds to step S303. In step S303, the object operation notifying unit 130 refers to the drawing object creation source attribute value 162e, and determines in step S304 whether the creation source is different from the remote conference client 20 or not. If it is determined in step S304 that the drawing object is a different creation source (YES), the process proceeds to step S305.
ステップS305では、オブジェクト操作通知部130は、検知された操作イベントに対応する描画オブジェクトの作成元属性値162eに応じて、対応する遠隔会議クライアント20に対し、当該描画オブジェクトに対する操作内容を通知するメッセージを送信し、ステップS306へ処理を進める。 In step S305, the object operation notifying unit 130 notifies the corresponding remote conference client 20 of the operation content for the drawing object in accordance with the drawing object creation source attribute value 162e corresponding to the detected operation event. Is transmitted, and the process proceeds to step S306.
ステップS302で通知が不要と判定された場合(ステップS302:NO)およびステップS304で作成元が当該遠隔会議クライアント20であると判定された場合(ステップS304:NO)は、ステップS306へ直接進められる。ステップS306では、描画オブジェクト編集部122は、上記描画オブジェクトに対し上記操作内容による操作を反映し、描画オブジェクト情報保存部124の保存される内容を更新する。ステップS307では、画像変換部126は、描画オブジェクト情報保存部124の更新された内容で画面表示を更新し、ステップS308で、本操作イベントに対応する処理を終了させる。これにより、描画オブジェクトの変更または削除が反映される。 If it is determined in step S302 that notification is not required (step S302: NO) and if it is determined in step S304 that the creation source is the remote conference client 20 (step S304: NO), the process proceeds directly to step S306. . In step S306, the drawing object editing unit 122 reflects the operation based on the operation content on the drawing object, and updates the content stored in the drawing object information storage unit 124. In step S307, the image conversion unit 126 updates the screen display with the updated contents of the drawing object information storage unit 124. In step S308, the process corresponding to the operation event is terminated. Thereby, the change or deletion of the drawing object is reflected.
一方、通知受信側の遠隔会議クライアント20は、通知発行側のステップS305に示す通知のメッセージの送信に対応して、該メッセージを受信する。ステップS400〜ステップS404の処理は、通知受信側のイベント検出部128が事前登録された通知受信イベントを検知したことに応答して、ステップS400から開始される。ここで、検知される通知受信イベントは、図10に示すオブジェクト操作通知設定画面260にて事前登録された通知表示を実施する通知受信イベントである。 On the other hand, the remote conference client 20 on the notification receiving side receives the message in response to the transmission of the notification message shown in step S305 on the notification issuing side. The processing from step S400 to step S404 is started from step S400 in response to the event reception unit 128 on the notification reception side detecting a pre-registered notification reception event. Here, the detected notification reception event is a notification reception event that implements a notification display pre-registered on the object operation notification setting screen 260 shown in FIG.
ステップS401では、画像変換部126は、受信した通知のメッセージが含む描画オブジェクトに対して行われた操作内容を表す付加表示を、事前指定された表示方法にて表示位置に表示させる。ステップS402では、表示解除イベントが通知されるまでの間(NOの間)、ステップS402をループさせる。表示解除イベントは、上記操作内容を表す付加表示を消去するイベントであり、特に限定されるものではないが、所定のタイマーが満了したこと、上記付加表示に確認ボタンがあるのであれば該確認ボタンがタッチされることなどを挙げることができる。 In step S401, the image conversion unit 126 displays an additional display representing the content of the operation performed on the drawing object included in the received notification message at the display position using a display method designated in advance. In step S402, until step S402 is notified (during NO), step S402 is looped. The display cancellation event is an event for erasing the additional display indicating the operation content, and is not particularly limited, but if the predetermined timer has expired and the additional display has a confirmation button, the confirmation button Can be mentioned.
ステップS402で、イベント検出部128から表示解除イベントの発生が通知された場合(YES)は、ステップS403へ処理を進める。ステップS403では、画像変換部126は、付加表示を解除する処理を行い、ステップS404で、本通知受信イベントに対応した処理を終了させる。 In step S402, when the event detection unit 128 notifies the occurrence of a display cancellation event (YES), the process proceeds to step S403. In step S403, the image conversion unit 126 performs a process of canceling the additional display, and in step S404, the process corresponding to the notification reception event is terminated.
図12(A)〜(C)は、オブジェクト操作通知機能により各拠点で表示される共有画面を例示する。図12(A)は、拠点Aで識別される遠隔会議クライアント20aの共有画面280Aを示す。拠点Aは、ここでは、操作主体であり、通知発行側のクライアントである。図12(B)は、拠点Bで識別される遠隔会議クライアント20bの共有画面280Bを示す。拠点Bは、描画オブジェクト284の作成元であり、通知受信側のクライアントである。図12(C)は、拠点Cで識別される遠隔会議クライアント20cの共有画面280Cを示す。拠点Cは、描画オブジェクト284の作成元でもなく、通知発行側でもなく、同一画面共有セッションに参加する他のクライアントである。 12A to 12C exemplify a shared screen displayed at each site by the object operation notification function. FIG. 12A shows a sharing screen 280A of the remote conference client 20a identified at the site A. In this case, the site A is an operation subject and a client on the notification issue side. FIG. 12B shows a sharing screen 280B of the remote conference client 20b identified at the site B. The base B is a creation source of the drawing object 284 and a client on the notification receiving side. FIG. 12C shows a sharing screen 280C of the remote conference client 20c identified at the site C. The base C is not the creation source of the drawing object 284, is not the notification issuer, and is another client participating in the same screen sharing session.
図12に示す例は、事前登録イベント「オブジェクト消去通知時」に応答して、表示方法「操作内容パネル表示」にて、表示位置「画面左下」に付加表示を行うという設定において表示される画面を例示するものである。図12(A)に示す共有画面280Aは、ツールメニュー282a〜282cのうちの消去モード282bが選択され、ポインタ286により手書き描画オブジェクト284の一部が消去されている状態を示す。図12(A)に示す共有画面280Aには、さらに、拠点表示機能により手書き描画オブジェクト284の作成元を示す拠点表示パネル288が表示されている。 In the example shown in FIG. 12, in response to the pre-registration event “when the object is deleted”, a screen displayed in a setting of performing additional display at the display position “bottom left of screen” with the display method “operation content panel display” Is illustrated. A shared screen 280A shown in FIG. 12A shows a state in which the erase mode 282b is selected from the tool menus 282a to 282c and a part of the handwritten drawing object 284 is erased by the pointer 286. A shared display 280A shown in FIG. 12 (A) further displays a base display panel 288 indicating the origin of the handwritten drawing object 284 by the base display function.
一方、図12(B)に示す共有画面280Bでは、オブジェクト操作通知機能により、拠点Bで作成された描画オブジェクト284が拠点Aにより消去されている旨を示す拠点表示パネル290が表示されている。図12(C)に示す共有画面280Cには、消去されているオブジェクト284のみが表示される。 On the other hand, on the shared screen 280B shown in FIG. 12B, a base display panel 290 indicating that the drawing object 284 created at the base B has been deleted by the base A is displayed by the object operation notification function. Only the deleted object 284 is displayed on the shared screen 280C shown in FIG.
上述したように、第1の実施形態による遠隔会議システムにおいては、複数の遠隔会議クライアント20で同時編集する場合において、描画オブジェクトに対する操作が行われた際に、該描画オブジェクトの作成元に対応する遠隔会議クライアントに対し、操作内容が通知される。このため、作成元の主体が認識しないうちに勝手に他の主体により描画オブジェクトに対し操作が行われていたという事態が発生することを防止することができる。 As described above, in the remote conference system according to the first embodiment, when an operation is performed on a drawing object in the case of simultaneous editing by a plurality of remote conference clients 20, it corresponds to the creation source of the drawing object. The contents of the operation are notified to the remote conference client. For this reason, it is possible to prevent a situation in which an operation has been performed on a drawing object by another subject without permission by the creator.
さらに、第1の実施形態による遠隔会議システムにおいては、遠隔会議クライアント20の画面上に描画オブジェクトの作成主体を表示する作成主体表示機能を備えている。このため、作成元の主体に認識させないうちに不意に描画オブジェクトに対し操作を行ってしまうという事態が生じることを予防することができる。 Further, the remote conference system according to the first embodiment has a creation subject display function for displaying a creation subject of a drawing object on the screen of the remote conference client 20. For this reason, it is possible to prevent a situation in which an operation is unexpectedly performed on a drawing object before the creation source main body recognizes it.
なお、上述した実施形態では、イベントの事前登録に関し、通知受信側として、オブジェクト操作通知設定画面260を用いて、通知表示を実施する通知受信イベントを登録するものとして説明した。この場合、通知発行側としては、オブジェクト操作通知の可能性のあるすべての操作イベントが予め登録される。しかしながら、他の実施形態では、通知発行側として、オブジェクト操作通知を実施する操作通知イベントを事前登録する態様としてもよい。この場合、通知受信側としては、通知されるすべての通知受信イベントに応答して通知表示を実施するものとして事前登録される。 In the embodiment described above, regarding event pre-registration, the notification receiving event for performing notification display is registered as a notification receiving side using the object operation notification setting screen 260. In this case, as the notification issuer, all operation events that may be notified of object operation are registered in advance. However, in another embodiment, an operation notification event for performing object operation notification may be pre-registered as a notification issuer. In this case, the notification receiving side is pre-registered as performing notification display in response to all notification reception events to be notified.
以下、上記オブジェクト操作内容を作成元に知らしめるオブジェクト操作通知機能をさらに推し進めて、描画オブジェクトに対する操作を行う際に、作成元に編集許可を申請することを特徴とする第2の実施形態について説明する。なお、第2の実施形態は、第1の実施形態と同様の構成を備えているため、以下、相違点を中心に説明する。また、第1の実施形態と同様の機能を有する各部については、同一符番を付して参照する。 In the following, a second embodiment will be described in which the object operation notification function for informing the creator of the object operation is further advanced, and when the drawing object is operated, an edit permission is applied to the creator. To do. In addition, since 2nd Embodiment is equipped with the structure similar to 1st Embodiment, it demonstrates below centering on difference. Further, each unit having the same function as in the first embodiment is referred to with the same reference numeral.
以下、図13を参照して、第2の実施形態において実現される編集許可申請機能の詳細について説明する。図13は、第2の実施形態による遠隔会議システムにおいて実現される機能ブロック図を示す。図13は、遠隔会議クライアント20の機能ブロックを示すが、遠隔会議サーバ14の機能ブロックは、第1の実施形態と同一である。 The details of the edit permission application function realized in the second embodiment will be described below with reference to FIG. FIG. 13 is a functional block diagram realized in the remote conference system according to the second embodiment. FIG. 13 shows functional blocks of the remote conference client 20, but the functional blocks of the remote conference server 14 are the same as those in the first embodiment.
遠隔会議クライアント20は、第1の実施形態と同様に、描画オブジェクト情報通信部120、描画オブジェクト編集部122、描画オブジェクト情報保存部124、画像変換部126およびイベント検出部128を含む。第2の実施形態による遠隔会議クライアント20は、第1の実施形態のオブジェクト操作通知部130に代えて、編集許可判定部132および編集許可通知部134を含む。描画オブジェクト情報通信部120、描画オブジェクト情報保存部124およびイベント検出部128のはたらきは、第1の実施形態と同様であるため詳細な説明を割愛する。 Similarly to the first embodiment, the remote conference client 20 includes a drawing object information communication unit 120, a drawing object editing unit 122, a drawing object information storage unit 124, an image conversion unit 126, and an event detection unit 128. The remote conference client 20 according to the second embodiment includes an edit permission determining unit 132 and an edit permission notifying unit 134 instead of the object operation notifying unit 130 of the first embodiment. Since the operations of the drawing object information communication unit 120, the drawing object information storage unit 124, and the event detection unit 128 are the same as those in the first embodiment, detailed description thereof is omitted.
図14は、第2の実施形態における描画オブジェクトのデータ構造を示す。図14に示す描画オブジェクト160は、通知要否属性値162fに代えて、編集可否を作成元主体に申請する必要があるか否かを示す編集可否属性値162gを含む。描画オブジェクト160の編集可否属性値162gは、例えば、すべてについて「不可」としたり、編集可否を切り替えるツールメニューやパレットをタッチするなどの操作に応じて設定したりすることができる。例えば、利用者は、自身が重要と認識するコメントを書き込む際に、編集不可に設定するためのパレットをタッチしてから、描画オブジェクトを作成することにより、その重要なコメントが勝手に消されてしまうこと防止することができる。 FIG. 14 shows the data structure of a drawing object in the second embodiment. The drawing object 160 shown in FIG. 14 includes an editability attribute value 162g indicating whether or not it is necessary to apply to the creator of the editability for the editability instead of the notification necessity attribute value 162f. The editable / non-editable attribute value 162g of the drawing object 160 can be set according to an operation such as “impossible” for all or touching a tool menu or a palette for switching editability. For example, when a user writes a comment that he / she recognizes as important, he touches the palette for setting it as non-editable, and then creates a drawing object, so that the important comment is deleted without permission. Can be prevented.
再び図13を参照すると、イベント検出部128は、編集許可申請機能に関連する事前登録されたイベントを検出して、編集許可申請機能を呼び出す手段である。描画オブジェクト編集部122は、当該遠隔会議クライアント20のタッチパネル26を介して描画オブジェクトの作成、変更または削除の操作が行われると、実行許可を確認し、描画オブジェクト情報保存部124に操作後の描画オブジェクトを保存し、描画オブジェクト情報通信部120により遠隔会議サーバ14へ送信させる。 Referring to FIG. 13 again, the event detection unit 128 is means for detecting a pre-registered event related to the edit permission application function and calling the edit permission application function. When a drawing object creation, change, or deletion operation is performed via the touch panel 26 of the remote conference client 20, the drawing object editing unit 122 confirms execution permission, and the drawing object information storage unit 124 performs drawing after the operation. The object is saved and transmitted to the remote conference server 14 by the drawing object information communication unit 120.
編集許可判定部132は、イベント検出部128により編集許可申請機能に関連して事前登録された操作イベントが検出されたことに応答して呼び出される。編集許可判定部132は、上記操作イベントに対応する描画オブジェクトの作成元属性値に応じた遠隔会議クライアント(例えば20b)に対し、メッセージを発行する。上記メッセージは、当該遠隔会議クライアント(例えば20a)に関連する主体が、他のメッセージ送信先の遠隔会議クライアント(例えば20b)に関連する作成主体により作成された描画オブジェクトに対して行う操作の許可を申請するものである。 The edit permission determination unit 132 is called in response to the event detection unit 128 detecting a pre-registered operation event related to the edit permission application function. The edit permission determination unit 132 issues a message to the remote conference client (for example, 20b) corresponding to the drawing object creation source attribute value corresponding to the operation event. The message indicates that the subject related to the remote conference client (for example, 20a) permits an operation to be performed on the drawing object created by the creating subject related to the remote conference client (for example, 20b) of the other message transmission destination. Apply.
編集許可判定部132は、上記操作イベントに対応する描画オブジェクトの編集可否属性値162gを参照して、編集可否属性値162gに「不可」が設定されているときは許可の申請を行う。編集許可判定部132は、申請に対し許可が回答された場合は、描画オブジェクト編集部122に対し実行許可を与える。一方、編集可否属性値162gに「可」が設定されていたときは上記許可の申請を行わずに、描画オブジェクト編集部122に対し実行許可を与える。 The edit permission determination unit 132 refers to the editability attribute value 162g of the drawing object corresponding to the operation event, and applies for permission when the “impossibility” is set in the editability attribute value 162g. The editing permission determination unit 132 gives execution permission to the drawing object editing unit 122 when permission is answered for the application. On the other hand, when “permitted” is set in the editability attribute value 162g, execution permission is given to the drawing object editing unit 122 without applying the permission.
編集許可通知部134は、他の遠隔会議クライアント(例えば20b)からメッセージを受信したことに応じて呼び出され、画像変換部126により当該遠隔会議クライアント(例えば20a)の操作者に許可を求める許可申請画面表示を表示させる。編集許可通知部134は、操作者による許可申請画面表示を介した許可の指示に応答して、メッセージ送信元の遠隔会議クライアント(例えば20b)に対し、操作の許可を与える通知を行う。 The edit permission notification unit 134 is called in response to receiving a message from another remote conference client (for example, 20b), and the image conversion unit 126 requests permission from the operator of the remote conference client (for example, 20a) for permission. Display the screen display. In response to the permission instruction through the permission application screen display by the operator, the edit permission notification unit 134 notifies the remote conference client (for example, 20b) of the message transmission source that the operation is permitted.
第2の実施形態の画像変換部126は、上記編集許可申請機能に関連して、他の遠隔会議クライアント(例えば20b)から上記メッセージを受信したことに応答して、事前指定された表示条件にて、許可申請画面表示をディスプレイ24の画面上に行う。上記許可申請画面表示は、メッセージ送信元の遠隔会議クライアント(例えば20b)に関連する主体が、当該遠隔会議クライアント(例えば20a)に関連する主体により作成された描画オブジェクトに対して行う操作の許可を求めるものである。これにより、作成元主体の許可無く勝手に描画オブジェクトに対し操作が行われていたという事態が発生することを低減することができる。 In response to receiving the message from another remote conference client (for example, 20b), the image conversion unit 126 according to the second embodiment sets the display condition specified in advance in response to the edit permission application function. The permission application screen is displayed on the screen of the display 24. The permission application screen display indicates that a subject related to a remote conference client (for example, 20b) as a message transmission source permits an operation to be performed on a drawing object created by the subject related to the remote conference client (for example, 20a). It is what you want. As a result, it is possible to reduce the occurrence of a situation in which an operation has been performed on a drawing object without permission of the creator.
以下、図15〜図18を参照して、編集許可申請機能について、より詳細に説明する。図15は、第2の実施形態における編集許可申請機能の設定画面を例示する。図15に示す編集許可確認設定画面300は、複数のセクション302〜306と、OKボタン308と、キャンセルボタン310とを含む。 Hereinafter, the edit permission application function will be described in more detail with reference to FIGS. 15 to 18. FIG. 15 illustrates a setting screen for the edit permission application function in the second embodiment. The edit permission confirmation setting screen 300 shown in FIG. 15 includes a plurality of sections 302 to 306, an OK button 308, and a cancel button 310.
編集許可確認設定画面300は、遠隔会議クライアント20のシステム管理画面などから呼び出される。なお、説明する実施形態において、編集許可確認設定画面300は、申請受信側の遠隔会議クライアント20の設定画面である。申請発行側の遠隔会議クライアント20には、編集許可申請の可能性のある操作イベントが予め登録されており、申請受信側で主体的に、編集許可確認設定画面300を用いて、操作者に対する許可の確認を実施する申請受信イベントを登録するものとする。しかしながら、他の実施形態では、第1の実施形態におけるオブジェクト操作通知機能と同様に、申請発行側が主体的に、編集許可確認を実施する操作イベントを事前登録してもよい。 The edit permission confirmation setting screen 300 is called from the system management screen of the remote conference client 20 or the like. In the embodiment to be described, the edit permission confirmation setting screen 300 is a setting screen of the remote conference client 20 on the application receiving side. In the remote conference client 20 on the application issuing side, an operation event that may be applied for editing permission is registered in advance, and permission is given to the operator by using the editing permission confirmation setting screen 300 independently on the application receiving side. The application reception event that performs the confirmation is registered. However, in other embodiments, similar to the object operation notification function in the first embodiment, the application issuing side may pre-register an operation event for performing the edit permission confirmation.
図15に示す第1のセクション302は、編集許可確認を行うために登録される1以上の申請受信イベントを設定するセクションである。登録可能な申請受信イベントとしては、特に限定されるものではないが、図15にチェックボックスとして示すように、オブジェクト消去申請受信時312a、オブジェクト移動申請受信時312b、オブジェクト変形申請受信時312cなどを挙げることができる。 A first section 302 shown in FIG. 15 is a section for setting one or more application reception events registered for performing editing permission confirmation. The application reception event that can be registered is not particularly limited. As shown in the check box of FIG. 15, the object deletion application reception time 312a, the object movement application reception time 312b, the object modification application reception time 312c, etc. Can be mentioned.
オブジェクト消去申請受信時312a、オブジェクト移動申請受信時312bおよびオブジェクト変形申請受信時312cは、それぞれ、当該遠隔会議クライアント20が作成元である描画オブジェクトに対し、他のクライアントにより消去操作、位置移動操作および変形操作(リサイズなど)が行われた場合になされる申請を受信したことに応答して発生するイベントである。 When receiving an object deletion application 312a, when receiving an object movement application 312b, and when receiving an object modification application 312c, the drawing object that is created by the remote conference client 20 is deleted, moved, and moved by another client. This is an event that occurs in response to receiving an application made when a transformation operation (such as resizing) is performed.
第2のセクション304は、編集許可確認表示を行う表示条件として表示方法を事前指定するセクションである。事前指定可能な表示方法としては、図15には、ダイアログ表示314aおよびパネル表示314bが例示されている。ダイアログ表示314aおよびパネル表示314bは、描画オブジェクトに対する編集操作の許可を求めるメッセージをダイアログ表示およびパネル表示する表示方法である。その他、図示しないが、描画オブジェクトに紐付けたポップアップ表示など他の表示方法を選択肢に含めてもよい。 The second section 304 is a section for pre-designating a display method as a display condition for performing edit permission confirmation display. As display methods that can be designated in advance, FIG. 15 illustrates a dialog display 314a and a panel display 314b. The dialog display 314a and the panel display 314b are display methods for displaying a message for requesting permission for an editing operation on the drawing object in a dialog display and a panel display. In addition, although not shown, other display methods such as pop-up display associated with the drawing object may be included in the options.
第3のセクション306は、表示条件として表示位置を事前指定するセクションである。事前指定可能な表示位置としては、画面に関連して表示される位置316a〜316hを挙げることができる。その他、図6に示すような特定オブジェクトに関連付けて表示させる選択肢があってもよい。また、上記ダイアログ表示314aを画面中央に表示するようにする選択肢があってもよい。 The third section 306 is a section for predesignating a display position as a display condition. Examples of display positions that can be designated in advance include positions 316a to 316h displayed in association with the screen. In addition, there may be options to be displayed in association with a specific object as shown in FIG. There may be an option for displaying the dialog display 314a in the center of the screen.
第1のセクション302で事前登録する1以上のイベントが選択され、第2のセクション304で事前指定する表示方法が選択され、第3のセクション306で事前指定する表示位置が選択された上で、OKボタン308がタッチされると、設定内容に応じて申請受信イベントの事前登録および表示方法・表示位置の事前指定が完了する。 One or more events to be pre-registered in the first section 302 are selected, a display method to be pre-specified in the second section 304 is selected, and a display position to be pre-specified in the third section 306 is selected, When the OK button 308 is touched, pre-registration of the application reception event and pre-designation of the display method / display position are completed according to the setting contents.
図16および図17は、第2の実施形態における、事前登録されたイベントに応答して実行される編集許可申請処理および編集許可確認表示処理を示すフローチャートである。図16に示す処理は、イベント検出部128が事前登録されたイベントを検知したことに応答して、ステップS500から開始される。ここで、検知されるイベントは、編集許可申請の可能性のある操作イベントである。なお、図16に示すステップS500〜S511の処理は、申請発行側の処理フローを示し、図17に示すステップS600〜S606の処理は、申請受信側の処理フローを示す。 FIGS. 16 and 17 are flowcharts showing an edit permission application process and an edit permission confirmation display process executed in response to a pre-registered event in the second embodiment. The process shown in FIG. 16 is started from step S500 in response to the event detection unit 128 detecting a pre-registered event. Here, the detected event is an operation event that may be applied for editing permission. Note that the processing in steps S500 to S511 shown in FIG. 16 shows the processing flow on the application issue side, and the processing in steps S600 to S606 shown in FIG. 17 shows the processing flow on the application reception side.
ステップS501では、編集許可判定部132は、検知された操作イベントに対応する描画オブジェクトの編集可否属性値162gを参照し、ステップS502で、編集不可であるか否かを判定する。ステップS502で、編集不可であると判定された場合(YES)は、ステップS503へ処理を進める。ステップS503では、編集許可判定部132は、上記描画オブジェクトの作成元属性値162eを参照し、ステップS504で、作成元が当該遠隔会議クライアント20と異なるか否かを判定する。ステップS504で、異なる作成元の描画オブジェクトであると判定された場合(YES)は、ステップS505へ処理を進める。 In step S501, the edit permission determination unit 132 refers to the editable / uneditable attribute value 162g of the drawing object corresponding to the detected operation event, and determines in step S502 whether editing is not possible. If it is determined in step S502 that editing is not possible (YES), the process proceeds to step S503. In step S503, the edit permission determination unit 132 refers to the drawing object creation source attribute value 162e, and determines in step S504 whether the creation source is different from the remote conference client 20 or not. If it is determined in step S504 that the drawing object is a different creation source (YES), the process proceeds to step S505.
ステップS505では、編集許可判定部132は、上記描画オブジェクトの作成元属性値162eに応じて、対応する遠隔会議クライアント20に対し、当該描画オブジェクトに対する操作の許可を申請するメッセージを送信する。ステップS506では、編集許可判定部132は、メッセージ送信先の遠隔会議クライアント20から、申請に対する回答を受信する。ステップS507では、編集許可判定部132は、回答が許可であるか却下であるかを判定する。ステップS507で、回答が却下であった場合(NO)は、ステップS512へ処理を進め、画像変換部126は、編集操作が却下された旨をディスプレイ24に表示し、操作を反映せずにステップS511で本処理を終了させる。 In step S505, the editing permission determination unit 132 transmits a message requesting permission for an operation on the drawing object to the corresponding remote conference client 20 in accordance with the drawing object creation source attribute value 162e. In step S506, the edit permission determination unit 132 receives a reply to the application from the remote conference client 20 that is the message transmission destination. In step S507, the edit permission determination unit 132 determines whether the answer is permission or rejection. If the answer is NO in step S507 (NO), the process proceeds to step S512, and the image conversion unit 126 displays on the display 24 that the editing operation has been rejected, and does not reflect the operation. In step S511, the process is terminated.
一方、ステップS507で、回答が許可であった場合(YES)は、ステップS508へ処理を進める。また、ステップS502で申請が不要と判定された場合(ステップS502:NO)およびステップS504で作成元が当該遠隔会議クライアント20であると判定された場合(ステップS504:NO)は、ステップS508へ直接進める。 On the other hand, if the answer is permission in step S507 (YES), the process proceeds to step S508. If it is determined in step S502 that an application is not required (step S502: NO) and if it is determined in step S504 that the creation source is the remote conference client 20 (step S504: NO), the process directly goes to step S508. Proceed.
ステップS508では、編集許可判定部132は、実行許可を描画オブジェクト編集部122に与える。ステップS509では、描画オブジェクト編集部122は、上記描画オブジェクトに対し上記操作内容による操作を反映し、描画オブジェクト情報保存部124の内容を更新する。ステップS510では、画像変換部126は、画面表示を更新し、ステップS511で、本編集操作イベントに対応する処理を終了させる。 In step S <b> 508, the editing permission determination unit 132 gives execution permission to the drawing object editing unit 122. In step S509, the drawing object editing unit 122 reflects the operation according to the operation content on the drawing object, and updates the content of the drawing object information storage unit 124. In step S510, the image conversion unit 126 updates the screen display, and in step S511, the process corresponding to the editing operation event is ended.
一方、申請受信側の遠隔会議クライアント20は、申請発行側のステップS505に示す申請のメッセージの送信に対応して、該メッセージを受信する。図17に示すステップS600〜ステップS606の処理は、申請受信側のイベント検出部128が事前登録された申請受信イベントを検知したことに応答して、ステップS600から開始される。ここで、検知される申請受信イベントは、図15に示す編集許可確認設定画面300にて事前登録された確認画面表示を実施する申請受信イベントである。 On the other hand, the remote conference client 20 on the application receiving side receives the message in response to the transmission of the application message shown in step S505 on the application issuing side. The process of step S600 to step S606 shown in FIG. 17 is started from step S600 in response to detection of a pre-registered application reception event by the event detection unit 128 on the application reception side. Here, the detected application reception event is an application reception event for displaying a confirmation screen pre-registered on the edit permission confirmation setting screen 300 shown in FIG.
ステップS601では、画像変換部126は、描画オブジェクトに対する操作の許可を確認する画面表示を、事前指定された表示方法にて表示位置に表示させる。ステップS602では、操作者による指示を待ち受け、許可の指示が返答された場合(YES)には、ステップS603へ処理を進める。一方、ステップS602で、却下の指示が返答された場合(NO)には、ステップS604へ処理を進める。 In step S601, the image conversion unit 126 displays a screen display for confirming permission of the operation on the drawing object at the display position by a display method designated in advance. In step S602, an instruction from the operator is awaited. If a permission instruction is returned (YES), the process proceeds to step S603. On the other hand, if a rejection instruction is returned in step S602 (NO), the process proceeds to step S604.
ステップS603では、編集許可通知部134は、申請元の遠隔会議クライアント20に対し、許可の回答を送信し、ステップS605へ処理を進める。一方、ステップS604では、編集許可通知部134は、申請元の遠隔会議クライアント20に対し、却下の回答を送信し、ステップS605へ処理を進める。ステップS605では、画像変換部126は、上記確認表示を消去する処理を行い、ステップS606で、本申請受信イベントに対応した処理を終了させる。 In step S603, the edit permission notification unit 134 transmits a permission response to the remote conference client 20 as the application source, and advances the process to step S605. On the other hand, in step S604, the edit permission notification unit 134 transmits a rejection response to the remote conference client 20 as the application source, and advances the process to step S605. In step S605, the image conversion unit 126 performs a process of deleting the confirmation display, and in step S606, the process corresponding to the present application reception event is terminated.
なお、図17に示す処理フローは、図15に示す編集許可確認設定画面300にて事前登録された申請受信イベントに対する処理の流れを説明するものである。編集許可申請の可能性のある申請受信イベントのうち、図15に示す編集許可確認設定画面300にて事前登録されなかったイベントについては、作成者による確認を求めずに編集を許可する権原を得るなどとすることができる。これにより、作成元の暗黙的な許可を確認した上で描画オブジェクトの変更または削除が反映されることになる。 Note that the processing flow shown in FIG. 17 describes the flow of processing for an application reception event registered in advance on the edit permission confirmation setting screen 300 shown in FIG. Among the application reception events that may be applied for editing permission, for the events that have not been pre-registered on the editing permission confirmation setting screen 300 shown in FIG. 15, the right to edit is obtained without asking for confirmation by the creator. And so on. Thereby, after confirming the implicit permission of the creation source, the change or deletion of the drawing object is reflected.
図18(A)および(B)は、編集許可申請機能により作成元の遠隔会議クライアント20で表示される画面を示す。図18(A)は、パネル表示の例であり、図18(B)は、ダイアログ表示の例である。図18(A)に示す共有画面320では、編集許可申請機能により表示パネル322が表示されている。表示パネル322は、手書き描画オブジェクトの消去が拠点Bから申請されている旨のメッセージ324と、許可または却下を指示するためのボタン326,328を含む。図18(B)に示す共有画面330も同様に、編集許可申請機能によりダイアログ332が画面中央に表示されている。ダイアログ332は、手書き描画オブジェクト284の消去が拠点Bから申請されている旨のメッセージ334と、許可または却下を指示するためのボタン336,338を含む。 FIGS. 18A and 18B show screens displayed on the remote conference client 20 of the creation source by the edit permission application function. FIG. 18A shows an example of panel display, and FIG. 18B shows an example of dialog display. In the sharing screen 320 shown in FIG. 18A, the display panel 322 is displayed by the edit permission application function. Display panel 322 includes a message 324 indicating that an application for deleting a handwritten drawing object has been applied from site B, and buttons 326 and 328 for instructing permission or rejection. Similarly, in the shared screen 330 shown in FIG. 18B, a dialog 332 is displayed at the center of the screen by the edit permission application function. Dialog 332 includes a message 334 that an application for deletion of handwritten drawing object 284 has been applied from site B, and buttons 336 and 338 for instructing permission or rejection.
上述したように、第2の実施形態による遠隔会議システムにおいては、複数の遠隔会議クライアント20で同時編集する場合において、描画オブジェクトに対する操作が行われようとした際に、該描画オブジェクトの作成元に対応する遠隔会議クライアントに対し、操作の許可の申請が行われる。このため、作成元の主体が許可しないのに勝手に他の主体により描画オブジェクトに対し操作が行われていたという事態が発生することを防止することができる。 As described above, in the remote conference system according to the second embodiment, when an operation is performed on a drawing object in the simultaneous editing by a plurality of remote conference clients 20, the drawing object is created. An application for permission of operation is made to the corresponding remote conference client. For this reason, it is possible to prevent a situation in which an operation has been performed on a drawing object by another subject without permission by the creator.
なお、説明する実施形態では、編集不可の描画オブジェクトについては、所定の編集操作が行われるたびに許可を申請するものとして説明してきた。しかしながら、一度編集が許可された描画オブジェクトは、再度の確認を必要としない場合も多いため、一度許可された描画オブジェクトの編集可否属性値を「編集可」に書き換える構成としてもよい。さらに、編集許可確認画面において、許可および却下に加えて、許可と共に編集可に書き換える指示を与えるボタンを設けてもよい。また、上述した第2の実施形態は、オブジェクト操作通知機能に代えて、編集許可申請機能を備えるものとして説明したが、さらに他の実施形態では、オブジェクト操作通知機能および編集許可申請機能の両方の機能を備える実施形態としてもよい。この場合、例えば編集許可申請が不要とされる場合にオブジェクト操作通知を行う態様とすることができる。 In the embodiment to be described, the drawing object that cannot be edited has been described as applying for permission every time a predetermined editing operation is performed. However, since a drawing object once permitted to be edited often does not need to be checked again, the editable attribute value of the once permitted drawing object may be rewritten to “editable”. Furthermore, on the edit permission confirmation screen, in addition to permission and rejection, a button may be provided that gives an instruction to rewrite to allow editing along with permission. Further, the second embodiment described above has been described as including an edit permission application function instead of the object operation notification function. However, in still another embodiment, both the object operation notification function and the edit permission application function are provided. It is good also as an embodiment provided with a function. In this case, for example, an object operation notification can be made when an edit permission application is not required.
以上説明した実施形態によれば、描画オブジェクトに対して作成元の主体以外の主体が何らかの操作を行ったときに、作成元主体が認識しないうちに勝手に描画オブジェクトに対し操作が行われていたという事態を防止することができる画面共有システム、画面共有端末、電子黒板システムおよびプログラムを提供することができる。 According to the embodiment described above, when a subject other than the creation source subject performs an operation on the drawing object, the manipulation is performed on the drawing object without the recognition of the creation source subject. It is possible to provide a screen sharing system, a screen sharing terminal, an electronic blackboard system, and a program that can prevent such a situation.
なお、上述まで説明してきた実施形態では、遠隔会議システム10は、複数の遠隔会議クライアント20と、遠隔会議サーバ14とを含むクライアント−サーバ・システムで構成されるものとして説明してきた。しかしながら、他の実施形態では、図19に示すように、遠隔会議システム60は、ネットワーク62を介してピア・ツー・ピアで接続される複数の遠隔会議端末70からなるシステムとして構成してもよい。 In the embodiment described above, the remote conference system 10 has been described as being configured by a client-server system including a plurality of remote conference clients 20 and a remote conference server 14. However, in another embodiment, as shown in FIG. 19, the remote conference system 60 may be configured as a system including a plurality of remote conference terminals 70 connected via a network 62 on a peer-to-peer basis. .
また、上述した実施形態では、画面共有端末として、ディスプレイ、タッチパネルおよびコンピュータ装置を含み構成される遠隔会議クライアントを用いて説明してきた。しかしながら、画面共有端末は、外部のディスプレイおよびタッチパネルに接続可能で、上述した遠隔会議クライアント・アプリケーションが稼働するコンピュータ装置として提供することもできる。 In the above-described embodiments, the remote meeting client including the display, the touch panel, and the computer device has been described as the screen sharing terminal. However, the screen sharing terminal can be connected to an external display and touch panel, and can also be provided as a computer device on which the above-described remote conference client application operates.
さらに、上記機能部は、アセンブラ、C、C++、C#、Java(登録商標)、などのレガシープログラミング言語やオブジェクト指向プログラミング言語などで記述されたコンピュータ実行可能なプログラムにより実現でき、ROM、EEPROM、EPROM、フラッシュメモリ、フレキシブルディスク、CD−ROM、CD−RW、DVD−ROM、DVD−RAM、DVD−RW、ブルーレイディスク、SDカード、MOなど装置可読な記録媒体に格納して、あるいは電気通信回線を通じて頒布することができる。 Furthermore, the functional unit can be realized by a computer-executable program written in a legacy programming language such as an assembler, C, C ++, C #, Java (registered trademark), an object-oriented programming language, or the like. EPROM, flash memory, flexible disk, CD-ROM, CD-RW, DVD-ROM, DVD-RAM, DVD-RW, Blu-ray disc, SD card, MO, etc. Can be distributed through.
これまで本発明の実施形態について説明してきたが、本発明の実施形態は上述した実施形態に限定されるものではなく、他の実施形態、追加、変更、削除など、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。 Although the embodiments of the present invention have been described so far, the embodiments of the present invention are not limited to the above-described embodiments, and those skilled in the art may conceive other embodiments, additions, modifications, deletions, and the like. It can be changed within the range that can be done, and any embodiment is included in the scope of the present invention as long as the effects of the present invention are exhibited.
10,60…ネットワーク環境、12,62…ネットワーク、14…遠隔会議サーバ、20,70…遠隔会議クライアント、22…コンピュータ装置、24…ディスプレイ、26…タッチパネル、30…コントローラ、40…CPU、42…ROM、44…RAM、46…キーボード、48…マウス、50…HDD、52…グラフィック・ボード、54…ネットワークI/F、56…外部機器接続インタフェース、58…バス、100…機能ブロック、110…描画オブジェクト情報通知部、112…描画オブジェクト情報通信部、120…描画オブジェクト情報通信部、122…描画オブジェクト編集部、124…描画オブジェクト情報保存部、126…画像変換部、128…イベント検出部、130…オブジェクト操作通知部、132…編集許可判定部、134…編集許可通知部、150…コンテナオブジェクト、152…コンテナ識別情報、154…更新時刻、156…背景画像データ、158…書き込みデータ、160…描画オブジェクト、162…属性値、200…拠点表示設定画面、202,204,206…セクション、208…OKボタン、210…キャンセルボタン、212,214,216,218…選択肢、230,240,250…共有画面、232,242,252…ツールメニュー、234,244,254…描画オブジェクト、236…ポインタ、238…パネル表示,246…強調表示、248…ストローク、256…ピン表示、260…オブジェクト操作通知設定画面、262,264,266…セクション、268…OKボタン、270…キャンセルボタン、272,274,276…選択肢、280…共有画面、282…ツールメニュー、284…描画オブジェクト、286…ポインタ、288,290…パネル表示、300…編集許可確認設定画面、302,304,306…セクション、308…OKボタン、310…キャンセルボタン、312,314,316…選択肢、320,330…共有画面、322…パネル表示、324,334…メッセージ、326,336…許可ボタン、328,338…却下ボタン、332…ダイアログ表示 DESCRIPTION OF SYMBOLS 10,60 ... Network environment, 12, 62 ... Network, 14 ... Remote conference server, 20, 70 ... Remote conference client, 22 ... Computer apparatus, 24 ... Display, 26 ... Touch panel, 30 ... Controller, 40 ... CPU, 42 ... ROM, 44 ... RAM, 46 ... Keyboard, 48 ... Mouse, 50 ... HDD, 52 ... Graphic board, 54 ... Network I / F, 56 ... External device connection interface, 58 ... Bus, 100 ... Function block, 110 ... Drawing Object information notification unit, 112 ... drawing object information communication unit, 120 ... drawing object information communication unit, 122 ... drawing object editing unit, 124 ... drawing object information storage unit, 126 ... image conversion unit, 128 ... event detection unit, 130 ... Object operation notification unit, 132... Collection permission determination unit, 134 ... editing permission notification unit, 150 ... container object, 152 ... container identification information, 154 ... update time, 156 ... background image data, 158 ... write data, 160 ... drawing object, 162 ... attribute value, 200 ... base display setting screen, 202, 204, 206 ... section, 208 ... OK button, 210 ... cancel button, 212, 214, 216, 218 ... choice, 230, 240, 250 ... shared screen, 232, 242, 252 ... tool Menu, 234, 244, 254 ... Drawing object, 236 ... Pointer, 238 ... Panel display, 246 ... Highlight display, 248 ... Stroke, 256 ... Pin display, 260 ... Object operation notification setting screen, 262, 264, 266 ... Section, 268 ... OK button, 270 ... key Cancel button, 272, 274, 276 ... choice, 280 ... shared screen, 282 ... tool menu, 284 ... drawing object, 286 ... pointer, 288, 290 ... panel display, 300 ... edit permission confirmation setting screen, 302, 304, 306 ... Section, 308 ... OK button, 310 ... Cancel button, 312, 314, 316 ... Options, 320, 330 ... Shared screen, 322 ... Panel display, 324, 334 ... Message, 326, 336 ... Allow button, 328, 338 ... Reject Button, 332 ... Dialog display
Claims (11)
共有される描画オブジェクトを記述する情報と、該描画オブジェクトの作成主体を識別する主体識別情報とを保存する保存手段と、
前記画面に対する入力操作に応答して、事前登録された操作イベントを検出するイベント検出手段と、
前記操作イベントに対応する描画オブジェクトの主体識別情報に応じた他の画面共有端末に対し、前記操作イベントの操作内容を含むメッセージを発行する発行手段と、
他の画面共有端末からメッセージを受信して、事前指定された表示条件にて、操作内容を表す画面表示を画面上に行う画像変換手段と
を含む、画面共有システム。 Each of the screen sharing systems includes one or more screen sharing terminals that share drawing objects written on each screen, and each of the screen sharing terminals includes:
Storage means for storing information describing a drawing object to be shared, and subject identification information for identifying a creation subject of the drawing object;
Event detection means for detecting a pre-registered operation event in response to an input operation on the screen;
Issuing means for issuing a message including the operation content of the operation event to another screen sharing terminal corresponding to the subject identification information of the drawing object corresponding to the operation event;
A screen sharing system comprising: image conversion means for receiving a message from another screen sharing terminal and performing screen display representing operation contents on the screen under a display condition designated in advance.
前記画像変換手段は、メッセージ送信元の画面共有端末に関連する主体が当該画像共有端末に関連する作成主体により作成された描画オブジェクトに対して行う操作の許可を求める画面表示を行う手段であり、
前記画面共有端末は、さらに、当該画面共有端末の操作者による前記画面表示を介した許可または却下の指示に応答して、前記メッセージ送信元の画面共有端末に対し、前記操作の許可または却下の通知を行う許否通知手段を含み、
前記メッセージ送信元の画像共有端末は、前記許否通知手段によって通知される結果に基づいて前記編集手段に対し前記操作イベントに対応する操作の実行許可を判定する、請求項1または2に記載の画面共有システム。 Each of the screen sharing terminals further comprises editing means for editing a drawing object corresponding to the operation event,
The image conversion means is a means for performing a screen display requesting permission of an operation performed on a drawing object created by a creation subject related to the image sharing terminal by a subject related to the screen sharing terminal of the message transmission source,
The screen sharing terminal is further responsive to the permission or rejection instruction via the screen display by the operator of the screen sharing terminal to permit or reject the operation to the screen sharing terminal of the message transmission source. Including permission / refusal notifying means for notifying,
3. The screen according to claim 1, wherein the image sharing terminal that is the message transmission source determines whether to allow the editing unit to execute an operation corresponding to the operation event based on a result notified by the permission / refusal notification unit. Shared system.
前記発行手段は、前記操作イベントに対応する描画オブジェクトの編集可否情報を参照して、前記編集可否情報に編集不可が設定されているときに前記許可の申請を行う、請求項3に記載の画面共有システム。 The storage means further stores in the drawing object editability information specifying whether or not the drawing object can be edited by a subject other than the creation subject,
The screen according to claim 3, wherein the issuing unit refers to editability information of a drawing object corresponding to the operation event, and applies the permission when editability is set in the editability information. Shared system.
共有される描画オブジェクトを記述する情報と、該描画オブジェクトの作成主体を識別する主体識別情報とを保存する保存手段と、
前記画面に対する入力操作に応答して、事前登録された操作イベントを検出するイベント検出手段と、
前記操作イベントに対応する描画オブジェクトの主体識別情報に応じた他の画面共有端末に対し、該操作イベントの操作内容を含むメッセージを発行する発行手段と、
他の画面共有端末からメッセージを受信して、事前指定された表示条件にて、操作内容を表す画面表示を画面上に行う画像変換手段と
を含む、画面共有端末。 A screen sharing terminal that shares drawing objects written on the screen with other screen sharing terminals,
Storage means for storing information describing a drawing object to be shared, and subject identification information for identifying a creation subject of the drawing object;
Event detection means for detecting a pre-registered operation event in response to an input operation on the screen;
Issuing means for issuing a message including the operation content of the operation event to another screen sharing terminal corresponding to the subject identification information of the drawing object corresponding to the operation event;
A screen sharing terminal comprising: image conversion means for receiving a message from another screen sharing terminal and performing screen display representing operation content on the screen under display conditions designated in advance.
画像変換手段が画面表示を行う表示装置に対応して設けられ、前記イベント検出手段に入力操作に関連する座標情報を与える座標検出装置とを備える電子黒板装置
を含む電子黒板システム。 A computer-executable program for causing a computer to function as the screen sharing terminal according to claim 8 or 9, and an image conversion means are provided corresponding to a display device that performs screen display, and the event detection means is configured to perform an input operation. An electronic blackboard system including an electronic blackboard device including a coordinate detection device that provides related coordinate information.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011202505A JP5810779B2 (en) | 2011-09-16 | 2011-09-16 | Screen sharing system, screen sharing terminal, electronic blackboard system and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011202505A JP5810779B2 (en) | 2011-09-16 | 2011-09-16 | Screen sharing system, screen sharing terminal, electronic blackboard system and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013065125A true JP2013065125A (en) | 2013-04-11 |
JP5810779B2 JP5810779B2 (en) | 2015-11-11 |
Family
ID=48188574
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011202505A Active JP5810779B2 (en) | 2011-09-16 | 2011-09-16 | Screen sharing system, screen sharing terminal, electronic blackboard system and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5810779B2 (en) |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014196654A1 (en) * | 2013-06-06 | 2014-12-11 | Ricoh Company, Ltd. | Transmission terminal, transmission system, display method and program |
WO2014208569A1 (en) * | 2013-06-28 | 2014-12-31 | Ricoh Company, Ltd. | Transmission terminal, program, image display method and transmission system |
JP2015011630A (en) * | 2013-07-01 | 2015-01-19 | 株式会社リコー | Image processing device and image processing method |
JP2015060592A (en) * | 2014-09-04 | 2015-03-30 | 株式会社リコー | Image processing system, and information processor |
JP2015069506A (en) * | 2013-09-30 | 2015-04-13 | シャープ株式会社 | Information processing device and electronic conference system |
EP2897043A1 (en) | 2014-01-16 | 2015-07-22 | Seiko Epson Corporation | Display apparatus, display system, and display method |
WO2015129550A1 (en) * | 2014-02-28 | 2015-09-03 | 株式会社リコー | Transfer control system, transfer system, transfer control method, and recording medium |
KR20150134906A (en) * | 2014-05-23 | 2015-12-02 | 삼성전자주식회사 | Method for sharing screen and electronic device thereof |
US9335860B2 (en) | 2013-09-17 | 2016-05-10 | Ricoh Company, Ltd. | Information processing apparatus and information processing system |
WO2016166955A1 (en) * | 2015-04-16 | 2016-10-20 | Ricoh Company, Ltd. | Image processing device, image distribution system, and image processing method |
JP2016537694A (en) * | 2013-11-19 | 2016-12-01 | 株式会社ワコム | Method and system for ink data generation, ink data rendering, ink data manipulation, and ink data transmission |
JP2017174248A (en) * | 2016-03-25 | 2017-09-28 | 富士ゼロックス株式会社 | Information processing device and information processing program |
JP2018526752A (en) * | 2015-09-11 | 2018-09-13 | アマゾン・テクノロジーズ・インコーポレーテッド | System, method, and computer-readable storage medium for customizable event-triggered calculations at edge positions |
JP2019008516A (en) * | 2017-06-23 | 2019-01-17 | 富士通株式会社 | Information processing device, information processing method, and program |
US10339329B2 (en) | 2014-09-25 | 2019-07-02 | International Business Machines Corporation | Controlling access to data in a database |
US10356613B2 (en) | 2015-02-27 | 2019-07-16 | Ricoh Company, Ltd. | Information processing device and information processing system that executes a process based on a user operation received from an operator |
US10789035B2 (en) | 2015-06-23 | 2020-09-29 | Ricoh Company, Ltd. | Communication terminal, management system, communication system, and display method |
WO2022107884A1 (en) * | 2020-11-20 | 2022-05-27 | 株式会社インタラクティブソリューションズ | Meeting assistance system |
US11360575B2 (en) | 2019-05-21 | 2022-06-14 | Seiko Epson Corporation | Control method for display system and display system |
JP7508916B2 (en) | 2020-07-20 | 2024-07-02 | 株式会社リコー | Display device, display method, and program |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09190398A (en) * | 1996-01-09 | 1997-07-22 | Canon Inc | Information processor and its control method |
JP2007066081A (en) * | 2005-08-31 | 2007-03-15 | Casio Comput Co Ltd | Electronic conference device, and electronic conference device control program |
JP2007328471A (en) * | 2006-06-06 | 2007-12-20 | Hiroki Shima | Document input editing system |
JP2009259188A (en) * | 2008-03-17 | 2009-11-05 | Ricoh Co Ltd | Apparatus, system and method for assisting collaborative work, program and recording medium |
JP2010002994A (en) * | 2008-06-18 | 2010-01-07 | Konica Minolta Holdings Inc | Information processing method, information processing apparatus, and program |
JP2010026701A (en) * | 2008-07-17 | 2010-02-04 | Hitachi Software Eng Co Ltd | Information sharing system |
JP2010044511A (en) * | 2008-08-11 | 2010-02-25 | Konica Minolta Holdings Inc | Information processing method, information processor, and program |
-
2011
- 2011-09-16 JP JP2011202505A patent/JP5810779B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09190398A (en) * | 1996-01-09 | 1997-07-22 | Canon Inc | Information processor and its control method |
JP2007066081A (en) * | 2005-08-31 | 2007-03-15 | Casio Comput Co Ltd | Electronic conference device, and electronic conference device control program |
JP2007328471A (en) * | 2006-06-06 | 2007-12-20 | Hiroki Shima | Document input editing system |
JP2009259188A (en) * | 2008-03-17 | 2009-11-05 | Ricoh Co Ltd | Apparatus, system and method for assisting collaborative work, program and recording medium |
JP2010002994A (en) * | 2008-06-18 | 2010-01-07 | Konica Minolta Holdings Inc | Information processing method, information processing apparatus, and program |
JP2010026701A (en) * | 2008-07-17 | 2010-02-04 | Hitachi Software Eng Co Ltd | Information sharing system |
JP2010044511A (en) * | 2008-08-11 | 2010-02-25 | Konica Minolta Holdings Inc | Information processing method, information processor, and program |
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014196654A1 (en) * | 2013-06-06 | 2014-12-11 | Ricoh Company, Ltd. | Transmission terminal, transmission system, display method and program |
JP2015015698A (en) * | 2013-06-06 | 2015-01-22 | 株式会社リコー | Transmission terminal, program, image display method, and transmission system |
JP2015029255A (en) * | 2013-06-28 | 2015-02-12 | 株式会社リコー | Transmission terminal, program, image display method, and transmission system |
US9986204B2 (en) | 2013-06-28 | 2018-05-29 | Ricoh Company, Ltd. | Transmission terminal, program, image display method and transmission system |
WO2014208569A1 (en) * | 2013-06-28 | 2014-12-31 | Ricoh Company, Ltd. | Transmission terminal, program, image display method and transmission system |
JP2015011630A (en) * | 2013-07-01 | 2015-01-19 | 株式会社リコー | Image processing device and image processing method |
US9335860B2 (en) | 2013-09-17 | 2016-05-10 | Ricoh Company, Ltd. | Information processing apparatus and information processing system |
JP2015069506A (en) * | 2013-09-30 | 2015-04-13 | シャープ株式会社 | Information processing device and electronic conference system |
JP2016537694A (en) * | 2013-11-19 | 2016-12-01 | 株式会社ワコム | Method and system for ink data generation, ink data rendering, ink data manipulation, and ink data transmission |
CN104796658B (en) * | 2014-01-16 | 2018-04-10 | 精工爱普生株式会社 | Display device, display system and display methods |
CN104796658A (en) * | 2014-01-16 | 2015-07-22 | 精工爱普生株式会社 | Display apparatus, display system, and display method |
EP2897043A1 (en) | 2014-01-16 | 2015-07-22 | Seiko Epson Corporation | Display apparatus, display system, and display method |
US9939943B2 (en) | 2014-01-16 | 2018-04-10 | Seiko Epson Corporation | Display apparatus, display system, and display method |
US9489075B2 (en) | 2014-01-16 | 2016-11-08 | Seiko Epson Corporation | Display apparatus, display system, and display method |
WO2015129550A1 (en) * | 2014-02-28 | 2015-09-03 | 株式会社リコー | Transfer control system, transfer system, transfer control method, and recording medium |
JPWO2015129550A1 (en) * | 2014-02-28 | 2017-03-30 | 株式会社リコー | Transmission control system, transmission system, transmission control method, and recording medium |
US10264131B2 (en) | 2014-02-28 | 2019-04-16 | Ricoh Company, Ltd. | Transmission control system, transmission system, and method of transmission control |
KR20150134906A (en) * | 2014-05-23 | 2015-12-02 | 삼성전자주식회사 | Method for sharing screen and electronic device thereof |
KR102219861B1 (en) * | 2014-05-23 | 2021-02-24 | 삼성전자주식회사 | Method for sharing screen and electronic device thereof |
JP2015060592A (en) * | 2014-09-04 | 2015-03-30 | 株式会社リコー | Image processing system, and information processor |
US10339329B2 (en) | 2014-09-25 | 2019-07-02 | International Business Machines Corporation | Controlling access to data in a database |
US11036878B2 (en) | 2014-09-25 | 2021-06-15 | International Business Machines Corporation | Controlling access to data in a database |
US10356613B2 (en) | 2015-02-27 | 2019-07-16 | Ricoh Company, Ltd. | Information processing device and information processing system that executes a process based on a user operation received from an operator |
WO2016166955A1 (en) * | 2015-04-16 | 2016-10-20 | Ricoh Company, Ltd. | Image processing device, image distribution system, and image processing method |
US11144276B2 (en) | 2015-06-23 | 2021-10-12 | Ricoh Company, Ltd. | Communication terminal, management system, communication system, and display method |
US10789035B2 (en) | 2015-06-23 | 2020-09-29 | Ricoh Company, Ltd. | Communication terminal, management system, communication system, and display method |
JP2019032903A (en) * | 2015-09-11 | 2019-02-28 | アマゾン・テクノロジーズ・インコーポレーテッド | Systems, methods and computer-readable storage media for customizable event-triggered computation at edge locations |
JP2018526752A (en) * | 2015-09-11 | 2018-09-13 | アマゾン・テクノロジーズ・インコーポレーテッド | System, method, and computer-readable storage medium for customizable event-triggered calculations at edge positions |
JP2017174248A (en) * | 2016-03-25 | 2017-09-28 | 富士ゼロックス株式会社 | Information processing device and information processing program |
US10459681B2 (en) | 2017-06-23 | 2019-10-29 | Fujitsu Limited | Information processing apparatus, information processing method, and storage medium |
JP2019008516A (en) * | 2017-06-23 | 2019-01-17 | 富士通株式会社 | Information processing device, information processing method, and program |
US11360575B2 (en) | 2019-05-21 | 2022-06-14 | Seiko Epson Corporation | Control method for display system and display system |
JP7508916B2 (en) | 2020-07-20 | 2024-07-02 | 株式会社リコー | Display device, display method, and program |
WO2022107884A1 (en) * | 2020-11-20 | 2022-05-27 | 株式会社インタラクティブソリューションズ | Meeting assistance system |
JP2022082431A (en) * | 2020-11-20 | 2022-06-01 | 株式会社インタラクティブソリューションズ | Meeting support system |
JP7430862B2 (en) | 2020-11-20 | 2024-02-14 | 株式会社インタラクティブソリューションズ | Meeting support system |
Also Published As
Publication number | Publication date |
---|---|
JP5810779B2 (en) | 2015-11-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5810779B2 (en) | Screen sharing system, screen sharing terminal, electronic blackboard system and program | |
JP6364893B2 (en) | Terminal device, electronic whiteboard system, electronic whiteboard input support method, and program | |
JP5153795B2 (en) | I / O device and computer program | |
US9640144B2 (en) | Projector, figure input/display apparatus, portable terminal, and program | |
CN113340199A (en) | Apparatus and method for measurement using augmented reality | |
JP6251214B2 (en) | Electronic device, method and program | |
US20090091547A1 (en) | Information display device | |
JP2007235744A (en) | Electronic conference system, program and method of supporting electronic conference, electronic conference controller, and conference server computer | |
JP2010239469A (en) | Handwritten input/display device, and whiteboard sharing system | |
CN108604173A (en) | Image processing apparatus, image processing system and image processing method | |
JP2017211494A (en) | Image processing apparatus, image processing system, image processing method, and program | |
WO2014002676A1 (en) | Image display device and image display system | |
JP2004317583A (en) | Plotting device | |
JP2007066081A (en) | Electronic conference device, and electronic conference device control program | |
CN109974581B (en) | Apparatus and method for measurement using augmented reality | |
JP2004021595A (en) | Meeting support cooperative work system | |
JP6209868B2 (en) | Information terminal, information processing program, information processing system, and information processing method | |
JP6293903B2 (en) | Electronic device and method for displaying information | |
JP2017224985A (en) | Information processing apparatus, electronic blackboard, and program | |
WO2023092254A1 (en) | Mind map adjustment method, storage medium and device | |
JP3343529B2 (en) | Conference system | |
JPH0410994A (en) | Ready blackboard apparatus | |
JP7298224B2 (en) | Display device and display method | |
JPH11296270A (en) | Portable display terminal equipment, portable display system and recording medium | |
JP2823021B2 (en) | Multi-window communication terminal, multi-window drawing image communication terminal, variable frame window communication terminal, and screen scroll control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140812 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150529 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150602 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150730 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150818 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150831 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5810779 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |