JP2009048656A - Terminal device, display system, display method, program, and recording medium - Google Patents

Terminal device, display system, display method, program, and recording medium Download PDF

Info

Publication number
JP2009048656A
JP2009048656A JP2008267251A JP2008267251A JP2009048656A JP 2009048656 A JP2009048656 A JP 2009048656A JP 2008267251 A JP2008267251 A JP 2008267251A JP 2008267251 A JP2008267251 A JP 2008267251A JP 2009048656 A JP2009048656 A JP 2009048656A
Authority
JP
Japan
Prior art keywords
background image
terminal device
data
medium
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008267251A
Other languages
Japanese (ja)
Inventor
Hideko Yoshino
英子 吉野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TOHO BUSINESS KANRI CENTER KK
TOHO BUSINESS KANRI CT KK
Original Assignee
TOHO BUSINESS KANRI CENTER KK
TOHO BUSINESS KANRI CT KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TOHO BUSINESS KANRI CENTER KK, TOHO BUSINESS KANRI CT KK filed Critical TOHO BUSINESS KANRI CENTER KK
Priority to JP2008267251A priority Critical patent/JP2009048656A/en
Publication of JP2009048656A publication Critical patent/JP2009048656A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a terminal device, which enables a user to smoothly conduct a meeting by inputting information through a handwriting operation. <P>SOLUTION: A feature for the terminal device comprises: a display means for displaying a background image based on a background image data; a receiving means, installed on an input device for the handwriting operations, for receiving holograph data to represent a handwritten content to be written on the recording medium that the background image data are written on; and reproducing means for displaying the handwritten content based on the holograph data by overlaying the content on the background image being displayed so that a position for the handwritten content in the background image on the recording medium corresponds to a position for the background image being displayed. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、端末装置、表示システム、表示方法、プログラム、及び記録媒体に関する。特に本発明は、手書き入力された情報を表示手段において正確に再現することができる端末装置、表示システム、表示方法、プログラム、及び記録媒体に関する。   The present invention relates to a terminal device, a display system, a display method, a program, and a recording medium. In particular, the present invention relates to a terminal device, a display system, a display method, a program, and a recording medium that can accurately reproduce information input by handwriting on a display means.

従来の会議システムとして、特開2002−44284号公報(特許文献1)に開示されたものがある。上記特許文献1に開示された会議システムは、複数のモバイルホワイトボードを備えて構成されており、モバイルホワイトボードに情報が入力されると、すべてのモバイルホワイトボードにこの情報が表示されることにより会議を行うシステムである。モバイルホワイトボードは表示部を備えており、当該表示部において入力ペンで手書きすることにより情報を入力する。
特開2002−44284号公報
A conventional conference system is disclosed in Japanese Patent Laid-Open No. 2002-44284 (Patent Document 1). The conference system disclosed in Patent Document 1 includes a plurality of mobile whiteboards. When information is input to the mobile whiteboard, the information is displayed on all the mobile whiteboards. This is a system for conducting a conference. The mobile whiteboard includes a display unit, and information is input by handwriting with the input pen on the display unit.
JP 2002-44284 A

しかし、液晶画面等の表示部に手書き入力する場合、ペン先と表示部上に表示される筆跡との間に視差等に基づくずれが生じるため、ユーザは入力する際に不自然さを感じる場合が多い。また、液晶画面等の表面は、ペンをスムーズに移動させることが材質的に難しく、美しく文字等を記載することは甚だ困難であった。   However, when handwritten input is performed on a display unit such as a liquid crystal screen, the user feels unnaturalness when inputting because a deviation based on parallax or the like occurs between the pen tip and the handwriting displayed on the display unit. There are many. Further, it is difficult to smoothly move the pen on the surface of the liquid crystal screen or the like, and it is extremely difficult to write characters and the like beautifully.

よって、本発明は、上記の課題を解決することのできる端末装置、表示システム、表示方法、プログラム、及び記録媒体を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。   Therefore, an object of this invention is to provide the terminal device, display system, display method, program, and recording medium which can solve said subject. This object is achieved by a combination of features described in the independent claims. The dependent claims define further advantageous specific examples of the present invention.

上記課題を解決するため、本発明の第1の形態によれば、背景画像データに基づいて背景画像を表示する表示手段と、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段と、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現手段と、を備えたことを特徴とする端末装置を提供する。   In order to solve the above-described problem, according to the first aspect of the present invention, a display unit that displays a background image based on background image data, and a medium placed on a handwritten input device on which a background image is drawn. Accepting handwriting data indicating the handwritten handwritten content, and based on the handwriting data, the position of the handwritten content in the background image on the medium and the position of the background image displayed by the displaying means correspond to each other. There is provided a terminal device characterized by comprising reproduction means for displaying written contents superimposed on a displayed background image.

当該端末装置は、背景画像データを、通信回線を介して受信する受信手段をさらに備えるのが好ましく、また、背景画像データに基づいて、印刷装置に、媒体上に背景画像を印刷させる印刷制御手段をさらに備えるのが好ましい。   The terminal device preferably further includes receiving means for receiving the background image data via a communication line, and print control means for causing the printing apparatus to print the background image on the medium based on the background image data. Is preferably further provided.

印刷制御手段は、手書き入力装置において媒体を載置する領域に応じて、背景画像を少なくとも一の方向に拡大又は縮小して印刷装置に印刷させるのが好ましい。この場合、当該端末装置は、媒体において背景画像が印刷された印刷領域における座標と、表示手段により背景画像が表示された表示領域における座標と、を対応づけた座標データを記憶する記憶手段をさらに備え、再現手段は、座標データに基づいて、表示された背景画像に重ねて筆記内容を表示するのが好ましい。   The print control means preferably causes the printing apparatus to print the background image by enlarging or reducing the background image in at least one direction in accordance with the area on which the medium is placed in the handwriting input device. In this case, the terminal device further includes storage means for storing coordinate data in which the coordinates in the print area where the background image is printed on the medium and the coordinates in the display area where the background image is displayed by the display means are associated. The prepared and reproducing means preferably displays the written contents on the displayed background image based on the coordinate data.

印刷制御手段は、媒体において印刷装置が印刷可能な領域に基づいて、背景画像を少なくとも一の方向に拡大又は縮小してもよい。また、印刷制御手段は、手書き入力装置に媒体を載置する方向を示す基準マークを、印刷装置にさらに印刷させてもよい。   The print control means may enlarge or reduce the background image in at least one direction based on an area of the medium that can be printed by the printing apparatus. The print control unit may further cause the printing apparatus to print a reference mark indicating a direction in which the medium is placed on the handwriting input device.

本発明の第2の形態によれば、上記の端末装置である第1の端末装置及び第2の端末装置と、当該第1の端末装置及び当該第2の端末装置と通信回線を介して接続されたサーバと、を備え、第1の端末装置は、背景画像データを通信回線を介してサーバに送信し、サーバは、前第1の端末装置から受信した背景画像データを通信回線を介して第2の端末装置に送信し、第2の端末装置は、サーバから受信した背景画像データに基づいて背景画像を表示することを特徴とする表示システムを提供する。   According to the 2nd form of this invention, it connects with the said 1st terminal device and the said 2nd terminal device via a communication line with the said 1st terminal device and the 2nd terminal device which are said terminal devices. The first terminal device transmits the background image data to the server via the communication line, and the server transmits the background image data received from the previous first terminal device via the communication line. Transmitting to a second terminal device, the second terminal device provides a display system characterized by displaying a background image based on background image data received from a server.

第2の端末装置は、第1の端末装置から背景画像を表示する要求があった場合に、背景画像を表示するのが好ましい。また、第1の端末装置は、当該第1の端末装置において受け付けた筆跡データである第1の筆跡データをサーバに送信し、サーバは、第1の筆跡データを少なくとも第2の端末装置に送信し、第2の端末装置は、第1の筆跡データが示す筆記内容を表示することが好ましい。   The second terminal device preferably displays the background image when there is a request to display the background image from the first terminal device. The first terminal device transmits first handwriting data, which is handwriting data received by the first terminal device, to the server, and the server transmits the first handwriting data to at least the second terminal device. And it is preferable that a 2nd terminal device displays the writing content which 1st handwriting data show.

第2の端末装置は、当該第2の端末装置において受け付けた筆跡データである第2の筆跡データをサーバに送信し、サーバは、第2の筆跡データを少なくとも第1の端末装置にさらに送信し、第1の端末装置は、第2の筆跡データが示す筆記内容をさらに表示することが好ましい。   The second terminal device transmits second handwriting data, which is handwriting data received by the second terminal device, to the server, and the server further transmits the second handwriting data to at least the first terminal device. The first terminal device preferably further displays the written content indicated by the second handwriting data.

本発明の第3の形態によれば、上記の端末装置である第1の端末装置及び第2の端末装置を備え、第1の端末装置は、背景画像と当該背景画像に重ねて表示された筆記内容とを含む合成画像を生成して第2の端末装置に送信し、第2の端末装置は、合成画像を第2の端末装置における背景画像として表示することを特徴とする表示システムを提供する。   According to the 3rd form of this invention, it was provided with the 1st terminal device and 2nd terminal device which are said terminal devices, and the 1st terminal device was displayed on the background image and the said background image so that it overlapped A display system is provided that generates a composite image including written content and transmits the composite image to a second terminal device, and the second terminal device displays the composite image as a background image in the second terminal device. To do.

本発明の第4の形態によれば、コンピュータを、背景画像データに基づいて背景画像を表示する表示手段、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現手段、として機能させるためのプログラムを提供する。   According to the fourth aspect of the present invention, the computer displays the background image based on the background image data, and the writing handwritten on the medium on which the background image is drawn placed on the handwriting input device. Accepting means for accepting handwriting data indicating the contents, based on the handwriting data, the displayed background image corresponds to the position of the handwritten content in the background image on the medium and the position of the background image displayed by the displaying means. Provided is a program for functioning as a reproduction means for displaying written contents in a superimposed manner.

本発明の第5の形態によれば、コンピュータを、背景画像データに基づいて背景画像を表示する表示手段、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現手段、として機能させるためのプログラムを格納した記録媒体を提供する。   According to the fifth aspect of the present invention, the computer displays the background image on the basis of the background image data, and the writing handwritten on the medium on which the background image is drawn placed on the handwriting input device. Accepting means for accepting handwriting data indicating the contents, based on the handwriting data, the displayed background image corresponds to the position of the handwritten content in the background image on the medium and the position of the background image displayed by the displaying means. Provided is a recording medium storing a program for causing it to function as a reproduction means for displaying written contents in an overlapping manner.

本発明の第6の形態によれば、背景画像データに基づいて背景画像を表示する表示ステップと、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付ステップと、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現ステップと、を備えたことを特徴とする表示方法を提供する。   According to the sixth aspect of the present invention, the display step of displaying the background image based on the background image data, and the written content handwritten on the medium on which the background image is drawn placed on the handwriting input device. A reception step for receiving handwriting data to be displayed, and based on the handwriting data, the position of the handwritten content in the background image on the medium and the position of the background image displayed by the display means are overlaid on the displayed background image. And a reproduction step for displaying the written content.

なお、本明細書において、手段とは、単に物理的手段を意味するものではなく、その手段が有する機能をソフトウェアによって実現する場合も含む。また、1つの手段が有する機能が2つ以上の物理的手段により実現されても、2つ以上の手段の機能が1つの物理的手段により実現されてもよい。   In this specification, the term “means” does not simply mean a physical means, but also includes a case where the functions of the means are realized by software. Further, the function of one means may be realized by two or more physical means, or the functions of two or more means may be realized by one physical means.

以下、図面を参照しつつ、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また、実施形態の中で説明されている特徴の組み合わせのすべてが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention with reference to the drawings. However, the following embodiments do not limit the invention according to the claims, and are described in the embodiments. Not all combinations of features are essential for the solution of the invention.

図1は、本発明の一実施形態に係る表示システム100を示す図である。表示システム100は、インターネット、専用回線、LAN等の通信回線110にアクセス可能に設けられた会議サーバ102及び表示サーバ104と、通信回線110にアクセス可能に設けられた複数の端末装置120(例えばパーソナルコンピュータ)とを備えて構成される。   FIG. 1 is a diagram showing a display system 100 according to an embodiment of the present invention. The display system 100 includes a conference server 102 and a display server 104 provided to be accessible to a communication line 110 such as the Internet, a dedicated line, and a LAN, and a plurality of terminal devices 120 (for example, personal computers) provided to be able to access the communication line 110. Computer).

端末装置120には、手書き入力装置200及び印刷装置140が接続されており、端末装置120、手書き入力装置200、及び印刷装置140により各ユーザが使用する端末システムが構築される。
そして、各端末装置120が会議サーバ102及び表示サーバ104にアクセスすることにより会議システムが構築されるとともに、当該会議システム上に表示システムが構築される。そして、各手書き入力装置200に載置された媒体に手書きされた筆記内容を、各端末装置120において表示させることにより、通信回線110上において会議を行うことができる。
A handwriting input device 200 and a printing device 140 are connected to the terminal device 120, and a terminal system used by each user is constructed by the terminal device 120, the handwriting input device 200, and the printing device 140.
Each terminal device 120 accesses the conference server 102 and the display server 104 to construct a conference system, and a display system is constructed on the conference system. A conference can be performed on the communication line 110 by displaying the handwritten content handwritten on the medium placed on each handwriting input device 200 on each terminal device 120.

具体的には、所定の端末装置120において会議の参加者であるユーザが音声、文字、画像等を入力し、他の端末装置120において当該音声、文字、画像等を出力する。こうして各端末装置120のユーザ間でコミュニケーションをとることにより、通信回線110上で会議を行う。   Specifically, a user who is a participant in a conference inputs a voice, a character, an image, etc. at a predetermined terminal device 120, and outputs the voice, a character, an image, etc. at another terminal device 120. Thus, a conference is performed on the communication line 110 by communicating between the users of the terminal devices 120.

さらに、本実施形態の表示システム100では、手書き入力装置200に載置された、所定の背景画像が描かれた媒体上にユーザが手書きした筆記内容を、各端末装置120のモニタに表示された当該所定の背景画像と重ねて表示させるにより会議を行うことができる。これにより、通信回線110上において会議を行う場合であっても、媒体の所望の位置に所望の文字等の情報を容易に手書き入力でき、かつ各端末装置120のユーザ間で当該情報を正確に共有できるため、会議をスムーズに進めることができる。   Furthermore, in the display system 100 of the present embodiment, the handwritten content handwritten by the user on the medium on which the predetermined background image is drawn placed on the handwriting input device 200 is displayed on the monitor of each terminal device 120. A conference can be held by displaying the predetermined background image in an overlapping manner. Thereby, even when a meeting is performed on the communication line 110, information such as a desired character can be easily handwritten at a desired position on the medium, and the information can be accurately input between users of each terminal device 120. Since it can be shared, the conference can proceed smoothly.

図2は、端末装置120の構成を示す機能ブロック図である。端末装置120は、CPU122と、ROM124と、RAM126と、HDD127と、表示手段128と、記録媒体の一例であるCD−ROM131に格納されたプログラムを読み出すCD−ROMドライブ129と、外部装置IF手段130と、通信IF手段132と、印刷制御手段134とを備えて構成される。CD−ROMドライブ129は、記録媒体に格納されたプログラムを読み出す手段の一例であって、磁気ディスクドライブ、DVDドライブ等の他の記録媒体を読み出し可能な手段であってもよい。   FIG. 2 is a functional block diagram illustrating the configuration of the terminal device 120. The terminal device 120 includes a CPU 122, a ROM 124, a RAM 126, an HDD 127, a display unit 128, a CD-ROM drive 129 for reading a program stored in a CD-ROM 131 which is an example of a recording medium, and an external device IF unit 130. And a communication IF unit 132 and a print control unit 134. The CD-ROM drive 129 is an example of a unit that reads a program stored in a recording medium, and may be a unit that can read another recording medium such as a magnetic disk drive or a DVD drive.

CPU122は、ROM124、HDD127及び/又はCD−ROM131に格納された、オペレーションシステム、会議システムプログラム、表示システムプログラム等のプログラムを読み出し、当該プログラムに基づいて本端末装置120の全体動作を制御する。各システムはソフトウェアプログラムとして単独で又は組み合わされてCD−ROM131等の記録媒体又は通信回線110を介して供給可能である。また、CPU122は、RAM124を、手書き入力装置200から受け付けた筆跡データ等のデータを格納するワークエリア等として使用する。   The CPU 122 reads programs such as an operation system, a conference system program, and a display system program stored in the ROM 124, the HDD 127, and / or the CD-ROM 131, and controls the overall operation of the terminal device 120 based on the programs. Each system can be supplied as a software program alone or in combination via a recording medium such as the CD-ROM 131 or the communication line 110. Further, the CPU 122 uses the RAM 124 as a work area for storing data such as handwriting data received from the handwriting input device 200.

表示手段128は、モニタやプロジェクタといった画像や文字等を表示する表示装置であり、会議に使用する背景画像や手書き入力装置200において手書きされた筆記内容を表示する。また、表示手段128は、当該装置に画像等を表示させる手段(例えばビデオボードやデバイスドライバ等)を含んでもよい。また、表示手段128は、端末装置120と別個に設けられてもよい。   The display unit 128 is a display device such as a monitor or a projector that displays images, characters, and the like, and displays a background image used for a meeting and handwritten content handwritten in the handwriting input device 200. Further, the display unit 128 may include a unit (for example, a video board or a device driver) that displays an image or the like on the apparatus. In addition, the display unit 128 may be provided separately from the terminal device 120.

外部装置IF手段130は、手書き入力装置200、カメラ202、マイク204、及びスピーカ206等の外部装置とデータの受け渡しを行う。外部装置IF手段130は、USB、RS−232C、IEEE1394等の通信規格に対応するチップやコネクタ等の通信機能を実現するための物理的手段や、デバイスドライバといった通信機能を実現するためのソフトウェアを含む。また、外部装置IF手段130は無線通信手段であってもよい。   The external device IF unit 130 exchanges data with external devices such as the handwriting input device 200, the camera 202, the microphone 204, and the speaker 206. The external device IF means 130 is a physical means for realizing a communication function such as a chip or a connector corresponding to a communication standard such as USB, RS-232C, IEEE1394, or software for realizing a communication function such as a device driver. Including. The external device IF unit 130 may be a wireless communication unit.

外部装置IF130は、カメラ202が取得した画像の画像データ、マイク204が取得した音声の音声データ、及び手書き入力装置200に載置された媒体に手書きされた筆記内容を示す筆跡データを受け取る。また、外部装置IF130は、通信回線110を介して端末装置120が受け取った音声データをスピーカ206に受け渡し、当該音声を再生させる。   The external device IF 130 receives image data acquired by the camera 202, audio data acquired by the microphone 204, and handwriting data indicating handwritten content handwritten on a medium placed on the handwriting input device 200. Also, the external device IF 130 passes the audio data received by the terminal device 120 via the communication line 110 to the speaker 206 and reproduces the audio.

通信IF手段132は、通信回線110を介して当該通信回線110に接続された会議サーバ102及び表示サーバ104、並びに他の端末装置120等と、背景画像データや筆跡データを送受信する等の通信を行う。通信IF手段132は無線通信手段であってもよい。   The communication IF unit 132 performs communication such as transmission / reception of background image data and handwriting data to / from the conference server 102 and the display server 104 connected to the communication line 110 via the communication line 110 and other terminal devices 120. Do. The communication IF unit 132 may be a wireless communication unit.

印刷制御手段134は、背景画像データに基づいて媒体上に背景画像を印刷装置140に印刷させるべく、端末装置120に接続された印刷装置140を制御する。ここで媒体とは、印刷用紙等の紙媒体や、プラスチック、ガラス等の印刷装置140や手書き入力装置200のペン230により文字、図形等を描くことができる媒体である。   The print control unit 134 controls the printing apparatus 140 connected to the terminal apparatus 120 so that the printing apparatus 140 prints a background image on a medium based on the background image data. Here, the medium is a medium on which characters, figures, and the like can be drawn with a paper medium such as printing paper, a printing device 140 such as plastic and glass, and the pen 230 of the handwriting input device 200.

図3は、手書き入力装置200の外観を示す図である。手書き入力装置200は、筐体210と、筐体210において背景画像が描かれた媒体が載置されるセンサボード220と、センサボード220上に載置された媒体に文字等を手書きするためのペン230と、センサボード220上に媒体を固定するためのクリップ240と、媒体に手書きされた筆記内容を表示手段128(図2参照)に再現するときの当該筆記内容の属性を受け付ける属性入力手段250と、媒体に手書きされた筆記内容を示す筆跡データを端末装置120に送信するための通信IF手段260とを備えて構成される。   FIG. 3 is a diagram illustrating an appearance of the handwriting input device 200. The handwriting input device 200 is used for handwriting a character or the like on a housing 210, a sensor board 220 on which a medium on which a background image is drawn in the housing 210 is placed, and a medium placed on the sensor board 220. The pen 230, the clip 240 for fixing the medium on the sensor board 220, and the attribute input means for receiving the attribute of the written content when the written content handwritten on the medium is reproduced on the display means 128 (see FIG. 2) 250 and communication IF means 260 for transmitting handwriting data indicating the handwritten content handwritten on the medium to the terminal device 120.

図4は、手書き入力装置200の構成を示す機能ブロック図である。手書き入力装置200は、本手書き入力装置200の全体動作を制御するCPU210と、CPU210のためのプログラムを格納したROM212と、媒体上に手書き入力された筆記内容から筆跡データを生成するためのワークエリア等として使用されるRAM214と、センサボード220においてペン先が検出されたタイミングを示すタイムスタンプデータを生成するタイムスタンプ生成手段とを備えて構成される。   FIG. 4 is a functional block diagram showing the configuration of the handwriting input device 200. The handwriting input device 200 includes a CPU 210 that controls the overall operation of the handwriting input device 200, a ROM 212 that stores a program for the CPU 210, and a work area for generating handwriting data from handwritten input on the medium. And a RAM 214 used as a time stamp, and time stamp generating means for generating time stamp data indicating the timing at which the pen tip is detected on the sensor board 220.

センサボード220は、ペン230から放出される電磁波の電界強度を検出する機能を備えている。センサボード220は、ペン230がセンサボード220に近接した場合、ペン230から放出された電磁波を検出することでセンサボード220(媒体)上におけるペン先の位置を検出する。この場合、例えば、ペン230を用いて筆記媒体上に筆記する(ペン230が筆記媒体に接する)ことを条件として、ペン先の位置を検出するように構成してもよい。   The sensor board 220 has a function of detecting the electric field strength of the electromagnetic wave emitted from the pen 230. When the pen 230 is close to the sensor board 220, the sensor board 220 detects the position of the pen tip on the sensor board 220 (medium) by detecting the electromagnetic wave emitted from the pen 230. In this case, for example, the pen tip position may be detected on the condition that writing is performed on the writing medium using the pen 230 (the pen 230 is in contact with the writing medium).

センサボード220におけるペン先の位置は、センサボード220の基準位置を原点とした2次元座標系上の座標値として特定される。センサボード220は、所定のタイミングでペン先の位置をサンプリングしRAM214に格納する。サンプリング間隔は、ペン230の速い動きを検出できる程度の時間間隔、例えば100回/秒以上の一定間隔に設定されるのが望ましい。   The position of the pen tip on the sensor board 220 is specified as a coordinate value on a two-dimensional coordinate system with the reference position of the sensor board 220 as the origin. The sensor board 220 samples the pen tip position at a predetermined timing and stores it in the RAM 214. It is desirable that the sampling interval be set to a time interval that can detect the fast movement of the pen 230, for example, a constant interval of 100 times / second or more.

RAM214は、CPU210のワークエリアとして利用される。なお、端末装置120等から転送されたプログラムを実行するように構成する場合には、プログラム領域としても使用される。ワークエリアは、例えば、センサボード220によって検出されたペン先の座標値を記憶するエリアや、ペン先の座標値が検出された時間を記憶するエリアや、当該座標値及び時間に基づき生成された筆跡データを記憶するエリア等により構成される。   The RAM 214 is used as a work area for the CPU 210. In the case where the program transferred from the terminal device 120 or the like is executed, the program area is also used. The work area is generated based on, for example, an area for storing the coordinate value of the pen tip detected by the sensor board 220, an area for storing the time when the coordinate value of the pen tip is detected, or the coordinate value and the time. It consists of an area for storing handwriting data.

属性入力手段250は、ユーザにより媒体に手書きされる筆記内容の属性をユーザから受け付ける。本実施形態で属性入力手段250は、ユーザがペン230を用いて筐体210に設けられた属性入力手段250に触れることにより、表示手段128に再現される筆記内容の属性を受け付けるよう構成されている。   The attribute input unit 250 receives an attribute of written content handwritten on the medium by the user from the user. In the present embodiment, the attribute input unit 250 is configured to accept the attribute of the written content reproduced on the display unit 128 when the user touches the attribute input unit 250 provided on the housing 210 using the pen 230. Yes.

ここで、筆記内容の属性とは、媒体に手書きされた筆記内容を端末装置120の表示手段128に表示するときの当該筆記内容(媒体に手書きされた点や線)の太さや色等である。また、筆記内容の属性は、媒体にペン230で手書きすることにより表示手段128にすでに表示されている筆記内容を消去する消しゴム及びその太さを含む。   Here, the attribute of the written content is the thickness or color of the written content (dots or lines handwritten on the medium) when the written content handwritten on the medium is displayed on the display unit 128 of the terminal device 120. . The attribute of the written content includes an eraser that erases the written content already displayed on the display means 128 by handwriting on the medium with the pen 230 and its thickness.

通信IF手段260は、端末装置120と通信を行う手段であって、生成された筆跡データを端末装置120に送信する。通信IF手段260は、USB、RS−232C、IEEE1394等の通信規格に対応するチップやコネクタ等の通信機能を実現するための物理的手段や、デバイスドライバといった通信機能を実現するためのソフトウェアを含む。また、通信IF手段260は無線通信手段であってもよい。   The communication IF unit 260 is a unit that communicates with the terminal device 120, and transmits the generated handwriting data to the terminal device 120. The communication IF means 260 includes physical means for realizing a communication function such as a chip and a connector corresponding to a communication standard such as USB, RS-232C, IEEE1394, and software for realizing a communication function such as a device driver. . Further, the communication IF unit 260 may be a wireless communication unit.

タイムスタンプ生成手段270は、センサボード220においてペン先の位置が検出されたタイミングを示すタイムスタンプデータを生成する。例えば、タイムスタンプ生成手段270は、所定の周期で論理値を変化させるクロック信号を生成する手段と、当該論理値の変化に基づいて値をカウントする手段とを有するように構成される。センサボード220により検出されたペン先の座標値は、当該座標値が検出されたタイミングを示すタイムスタンプデータと対応づけられた時系列データとしてRAM214に格納される。   The time stamp generating means 270 generates time stamp data indicating the timing at which the pen tip position is detected on the sensor board 220. For example, the time stamp generation unit 270 is configured to include a unit that generates a clock signal that changes a logical value at a predetermined period and a unit that counts a value based on the change in the logical value. The coordinate value of the pen tip detected by the sensor board 220 is stored in the RAM 214 as time series data associated with time stamp data indicating the timing at which the coordinate value is detected.

センサボード220は、タイムスタンプ生成手段270が生成したタイムスタンプデータに基づいて、所定の時間間隔でペン先の位置をサンプリングしてもよい。この場合、センサボード220は、検出したペン先の座標値とタイムスタンプデータとを対応づけることにより、時系列データとしてRAM214に格納する。   The sensor board 220 may sample the pen tip position at a predetermined time interval based on the time stamp data generated by the time stamp generating means 270. In this case, the sensor board 220 stores the coordinate value of the detected pen tip and the time stamp data in the RAM 214 as time series data.

CPU210は、RAM214に格納された座標値の時系列データに属性入力手段250で受け付けた筆記内容の属性情報を対応づけて筆跡データを生成する。また、CPU210は、必要に応じて手書き入力装置200を識別する機器識別情報(例えばMACアドレス)を筆跡データに付加してもよい。   The CPU 210 generates handwriting data by associating the time-series data of the coordinate values stored in the RAM 214 with the attribute information of the writing content received by the attribute input unit 250. Moreover, CPU210 may add the apparatus identification information (for example, MAC address) which identifies the handwriting input device 200 to handwriting data as needed.

また、CPU210は、上述したタイムスタンプ生成手段270に代えて、定期的に内部クロックを参照して生成したタイムスタンプデータをキャラクタコード又はバイナリコードで筆跡データに付加してもよい。また、手書き入力装置200は、ペン先の座標値及び属性情報を端末装置120に送信し、端末装置120においてペン先の座標値及び属性情報にタイムスタンプデータを付加することにより筆跡データを生成してもよい。   Further, instead of the time stamp generating means 270 described above, the CPU 210 may periodically add time stamp data generated by referring to the internal clock to the handwriting data using a character code or a binary code. The handwriting input device 200 transmits the pen tip coordinate value and attribute information to the terminal device 120, and generates handwriting data by adding time stamp data to the pen tip coordinate value and attribute information in the terminal device 120. May be.

図5は、本実施形態に係る表示システム100の動作の一例を示すフローチャートである。以下、本実施形態に係る表示システム100を用いて端末装置120のユーザが通信回線110上で会議を行うときの表示システム100の動作について説明する。なお、以下において通信回線110に複数の端末装置120がアクセス可能に設けられている形態について説明するが、会議システムを構築する端末装置120がある拠点を局と呼び、当該会議の司会を行うユーザが使用する端末装置120がある局を親局、他のユーザが使用する端末装置120がある局を子局とする。   FIG. 5 is a flowchart showing an example of the operation of the display system 100 according to the present embodiment. Hereinafter, the operation of the display system 100 when the user of the terminal device 120 performs a conference on the communication line 110 using the display system 100 according to the present embodiment will be described. In the following, a mode in which a plurality of terminal devices 120 are provided so as to be accessible to the communication line 110 will be described. However, a user who calls a base where the terminal device 120 for constructing the conference system is called a station and moderates the conference. A station where the terminal device 120 used by the user is a parent station, and a station where the terminal device 120 used by another user is a child station.

まず、各端末装置120の表示手段128に表示する背景画像データを親局において取得する(S110)。背景画像データは、例えばJPEG、BMP、GIF等の表示手段128に表示可能な画像ファイルとして取得される。背景画像データは、紙媒体等に描かれた背景画像をスキャナ等の画像入力装置によって取得してもよく、また、文書作成ソフトウェアや画像作成ソフトウェアを用いて作成した文書等を画像データに変換することにより取得してもよい。また、インターネットサイトにアップロードされている画像データをダウンロードすることにより背景画像データを取得してもよい。   First, background image data to be displayed on the display means 128 of each terminal device 120 is acquired in the master station (S110). The background image data is acquired as an image file that can be displayed on the display means 128 such as JPEG, BMP, and GIF. As the background image data, a background image drawn on a paper medium or the like may be acquired by an image input device such as a scanner, and a document created using document creation software or image creation software is converted into image data. You may acquire by. Further, the background image data may be acquired by downloading image data uploaded to the Internet site.

次に、親局及び各子局を会議サーバ102及び表示サーバ104に接続する(S120)。親局及び各子局のユーザは、当該端末装置120に予めインストールされたプログラムを起動し、会議サーバ102及び表示サーバ104にアクセスすることにより、各端末装置120を会議サーバ102及び表示サーバ104に接続する。これにより、通信回線110上に会議システムが構築されるとともに、当該会議システム上において表示システムが構築され、各局のユーザは通信回線110上で会議を行うことができる。   Next, the master station and each slave station are connected to the conference server 102 and the display server 104 (S120). The user of the master station and each slave station starts the program installed in advance in the terminal device 120 and accesses the conference server 102 and the display server 104, so that each terminal device 120 is transferred to the conference server 102 and the display server 104. Connecting. As a result, a conference system is constructed on the communication line 110 and a display system is constructed on the conference system, so that users of each station can hold a conference on the communication line 110.

次に、親局から表示サーバ104に背景画像データを送信する(S130)。そして、表示サーバ104は、親局から受け取った背景画像データを各子局に送信する(S140)。本実施形態では親局から子局に表示サーバ104を介して背景画像データを送信しているが、表示システム100の動作とは別に、例えば電子メール等の送信手段を用いて親局から子局に背景画像データを送信してもよい。   Next, the background image data is transmitted from the master station to the display server 104 (S130). Then, the display server 104 transmits the background image data received from the master station to each slave station (S140). In this embodiment, the background image data is transmitted from the parent station to the child station via the display server 104. However, separately from the operation of the display system 100, the parent station uses the transmission means such as e-mail, for example. The background image data may be transmitted.

次に、各局において端末装置120は、当該端末装置120の表示手段128に表示される背景画像における座標値と、印刷装置140により媒体に印刷された背景画像における座標値とが対応するように、表示サーバ104から受け取った背景画像を少なくとも一の方向に拡大又は縮小する(S150)。本実施形態において端末装置120は、表示手段128に表示される背景画像と、媒体に印刷された背景画像とが相似するように、受け取った背景画像を少なくとも拡大又は縮小する。   Next, in each station, the terminal device 120 causes the coordinate value in the background image displayed on the display unit 128 of the terminal device 120 to correspond to the coordinate value in the background image printed on the medium by the printing device 140. The background image received from the display server 104 is enlarged or reduced in at least one direction (S150). In the present embodiment, the terminal device 120 at least enlarges or reduces the received background image so that the background image displayed on the display unit 128 is similar to the background image printed on the medium.

端末装置120は、例えば、手書き入力装置200において媒体が載置される領域(センサボード220)の形状や大きさに応じて、受け取った背景画像を拡大又は縮小する。この場合、端末装置120は、例えば当該領域についての情報を手書き入力装置200から受け取り、当該情報に基づいて受け取った背景画像を拡大又は縮小する。また、端末装置120は、ROM124若しくはRAM126又はHDD127に当該情報を予め格納しておいてもよい。当該情報は、ROM124若しくはRAM126又はHDD127に格納されたプログラムの一部であってもよい。   For example, the terminal device 120 enlarges or reduces the received background image according to the shape and size of the area (sensor board 220) on which the medium is placed in the handwriting input device 200. In this case, the terminal device 120 receives, for example, information about the region from the handwriting input device 200, and enlarges or reduces the received background image based on the information. The terminal device 120 may store the information in advance in the ROM 124, the RAM 126, or the HDD 127. The information may be a part of a program stored in the ROM 124, the RAM 126, or the HDD 127.

また、端末装置120は、媒体において印刷装置140が印刷可能な領域に基づいて、受け取った背景画像を拡大又は縮小してもよい。例えば、端末装置120は、当該印刷可能な領域において背景画像が最も大きく印刷されるように背景画像を拡大又は縮小する。この場合、端末装置120は、例えば当該領域についての情報を印刷装置140から受け取り、当該情報に基づいて受け取った背景画像を拡大又は縮小する。また、端末装置120は、ROM124若しくはRAM126又はHDD127に当該情報を予め格納しておいてもよい。例えば、端末装置120は、ROM124若しくはRAM126又はHDD127に格納されたプリンタドライバ等のプログラムから当該情報を取得してもよい。   Further, the terminal device 120 may enlarge or reduce the received background image based on an area of the medium that can be printed by the printing device 140. For example, the terminal device 120 enlarges or reduces the background image so that the background image is printed most greatly in the printable area. In this case, for example, the terminal device 120 receives information about the region from the printing device 140, and enlarges or reduces the received background image based on the information. The terminal device 120 may store the information in advance in the ROM 124, the RAM 126, or the HDD 127. For example, the terminal device 120 may acquire the information from a program such as a printer driver stored in the ROM 124 or the RAM 126 or the HDD 127.

次に、各局において端末装置120は、印刷装置140に、背景画像を媒体上に印刷させる(S160)。本実施形態において各局の端末装置120は、印刷装置140に、背景画像を拡大又は縮小するステップ(S150)において拡大又は縮小された背景画像を媒体上に印刷させる。これにより、センサボード220に載置された媒体上に手書きされた筆記内容を、表示手段128に表示された背景画像に重ねて正確に再現することができる。また、各局において端末装置120は、印刷装置140に、後述する背景画像に重ねて筆記内容を再現するステップ(S240)において背景画像に重ねて再現された筆記内容を含む画像を媒体に印刷させてもよい。   Next, in each station, the terminal device 120 causes the printing device 140 to print the background image on the medium (S160). In the present embodiment, the terminal device 120 of each station causes the printing apparatus 140 to print the background image enlarged or reduced in the step of enlarging or reducing the background image (S150) on the medium. Thereby, the written content handwritten on the medium placed on the sensor board 220 can be accurately reproduced by being superimposed on the background image displayed on the display means 128. In each station, the terminal device 120 causes the printing device 140 to print on the medium an image including the writing content reproduced on the background image in the step (S240) of reproducing the writing content on the background image to be described later. Also good.

次に、各局の端末装置120において表示手段128に背景画像を表示する(S170)。図6は、表示手段128に表示される表示画面(ウインドウ)の一例を示す図であり、この表示画面では、端末装置120に接続されたカメラ202により取得された各局のユーザの画像を表示する領域142と、背景画像146が表示される領域144(メインエリア)と、各局のユーザがテキストデータによりチャットをする領域146とが設けられている。   Next, a background image is displayed on the display means 128 in the terminal device 120 of each station (S170). FIG. 6 is a diagram illustrating an example of a display screen (window) displayed on the display unit 128. On this display screen, an image of a user of each station acquired by the camera 202 connected to the terminal device 120 is displayed. An area 142, an area 144 (main area) where the background image 146 is displayed, and an area 146 where users of each station chat using text data are provided.

各局の端末装置120は、背景画像を拡大又は縮小するステップ(S150)において各端末装置120により拡大又は縮小された背景画像を表示手段128に表示する。各子局において端末装置120は、親局の端末装置120から背景画像を表示する要求があった場合に、背景画像を表示するのが好ましい。本実施形態では、親局の端末装置120において各局で表示すべき背景画像が選択された場合に、親局の端末装置120が表示サーバ104を介して各子局に当該選択された背景画像を表示するように要求する。   The terminal device 120 of each station displays the background image enlarged or reduced by each terminal device 120 on the display unit 128 in the step of enlarging or reducing the background image (S150). In each slave station, the terminal device 120 preferably displays the background image when there is a request to display the background image from the terminal device 120 of the master station. In this embodiment, when a background image to be displayed at each station is selected in the terminal device 120 of the master station, the terminal device 120 of the master station transmits the selected background image to each slave station via the display server 104. Request to be displayed.

次に、各局において表示された背景画像に合う背景画像が印刷された媒体を、各端末装置120に接続された手書き入力装置200に載置する(S180)。具体的には、図7に示すように、手書き入力装置200のセンサボード220上に当該媒体を載置し、クリップ240により固定する。この場合、センサボード220の基準位置に、媒体の所定の位置を合わせて載置するのが望ましい。例えば、センサボード220の左上角位置に、媒体の四隅のいずれかが重なるように載置する。また、センサボード220に、後述する背景画像に重ねて筆記内容を再現するステップ(S240)において、背景画像に重ねて再現された筆記内容を含む画像が印刷された媒体を載置してもよい。   Next, a medium on which a background image matching the background image displayed at each station is printed is placed on the handwriting input device 200 connected to each terminal device 120 (S180). Specifically, as shown in FIG. 7, the medium is placed on the sensor board 220 of the handwriting input device 200 and fixed with a clip 240. In this case, it is desirable to place the medium at a predetermined position on the reference position of the sensor board 220. For example, the sensor board 220 is placed so that one of the four corners of the medium overlaps the upper left corner position of the sensor board 220. Further, on the sensor board 220, a medium on which an image including the written content reproduced on the background image is printed may be placed in the step (S240) of reproducing the written content superimposed on the background image described later. .

また、端末装置120は、媒体に背景画像を印刷するステップ(S160)において、印刷装置140に、媒体上に基準マーク222を印刷させてもよい。そして、基準マーク222が手書き入力装置200に設けられた基準マーク224と合うように、媒体をセンサボード220に載置してもよい。   Further, the terminal device 120 may cause the printing device 140 to print the reference mark 222 on the medium in the step of printing the background image on the medium (S160). Then, the medium may be placed on the sensor board 220 so that the reference mark 222 matches the reference mark 224 provided on the handwriting input device 200.

本実施形態において背景画像を拡大又は縮小して媒体に印刷し、当該媒体を手書き入力装置200の所定の位置に載置することにより、後述する背景画像に重ねて筆記内容を再現するステップ(S240)において、背景画像が印刷された媒体上に手書きされた筆記内容を、表示手段128に表示された背景画像に重ねて正確に再現することができる。   In this embodiment, the background image is enlarged or reduced, printed on a medium, and the medium is placed at a predetermined position of the handwriting input device 200, thereby reproducing the written content on the background image described later (S240). ), The written content handwritten on the medium on which the background image is printed can be accurately reproduced by being superimposed on the background image displayed on the display means 128.

以上のように、各局の端末装置120が会議サーバ102及び表示サーバ104に接続され、会議システム及び表示システムが構築された後、各局の表示手段128において背景画像が表示されると背景画像に筆記ができる状態となる。続いて、まず親局において筆記がされ、次いで子局において筆記がされる場合を例に表示システム100の動作について説明する。   As described above, after the terminal device 120 of each station is connected to the conference server 102 and the display server 104 and the conference system and the display system are constructed, when the background image is displayed on the display means 128 of each station, the background image is written. Will be ready to Subsequently, the operation of the display system 100 will be described by taking as an example a case where writing is first performed in the master station and then in the slave station.

まず、親局の手書き入力装置200において、例えば図8に示すように媒体上に文字等が筆記(同図では日程及び担当者の欄に筆記)されると(S190 Yes)、親局の手書き入力装置200は当該筆記内容について筆跡データを生成し(S200)、端末装置120に送信する。そして、親局の端末装置120は、手書き入力装置200から生成された筆跡データを受け付け、当該筆跡データを表示サーバ104に送信する(S210)。   First, in the master station handwriting input device 200, for example, as shown in FIG. 8, when characters or the like are written on the medium (in the figure, the schedule and the person in charge are written) (S190 Yes), the master station handwriting is performed. The input device 200 generates handwriting data for the written content (S200) and transmits it to the terminal device 120. The terminal device 120 of the master station receives the handwriting data generated from the handwriting input device 200 and transmits the handwriting data to the display server 104 (S210).

次に、表示サーバ104は、親局から受信した筆跡データに基づいて、各局の手書き入力装置200に手書きされた筆記内容の履歴を生成する(S220)。表示サーバ104は、各局から受け取った筆跡データに含まれる、当該筆記内容が手書きされたタイムスタンプデータに基づいて、各筆跡データを時系列データにすることにより筆記内容の履歴を生成する。これにより、表示サーバ104において筆跡データを時系列に管理することができ、必要に応じて各局の表示手段128において筆記内容を時系列で順番に再度再現することができる。   Next, the display server 104 generates a history of handwritten contents handwritten on the handwriting input device 200 of each station based on the handwriting data received from the master station (S220). The display server 104 generates a history of writing contents by converting each writing data into time-series data based on time stamp data in which the writing contents are handwritten, which is included in the writing data received from each station. Thereby, the handwriting data can be managed in time series in the display server 104, and the writing contents can be reproduced again in order in time series on the display means 128 of each station as necessary.

また、表示システム100が複数種類の背景画像を用いる場合、表示サーバ104は、背景画像ごとに筆記内容の履歴を生成してもよい。すなわち、表示サーバ104は、第1の背景画像に重ねて表示された筆記内容に対応する筆跡データを当該第1の背景画像に対応づけて筆記内容の履歴を生成し、第2の背景画像に重ねて表示された筆記内容に対応する筆跡データを当該第2の背景画像に対応づけて生成する。この場合、各局の端末装置120は、表示手段128において筆記内容が表示されたときに当該表示手段128に表示されている背景画像を示す背景画像識別情報を、筆跡データに付加して表示サーバ104に送信してもよい。この場合、表示サーバ104は、背景画像識別情報に基づいて、背景画像ごとに筆跡データを時系列データにすることにより筆記内容の履歴を生成する。   When the display system 100 uses a plurality of types of background images, the display server 104 may generate a history of written contents for each background image. That is, the display server 104 associates the handwriting data corresponding to the written content displayed superimposed on the first background image with the first background image, generates a history of the written content, and sets the second background image as the second background image. Handwriting data corresponding to the handwritten content displayed in an overlapping manner is generated in association with the second background image. In this case, the terminal device 120 of each station adds background image identification information indicating a background image displayed on the display unit 128 when the written content is displayed on the display unit 128 to the handwriting data, and displays the display server 104. May be sent to. In this case, the display server 104 generates a writing content history by converting the handwriting data to time-series data for each background image based on the background image identification information.

次に、表示サーバ104は、親局を含む各局に、親局から受信した筆跡データを送信する(S230)。そして、親局を含む各局において端末装置120は、筆跡データに基づいて、図9に示すように背景画像146に重ねて筆記内容を再現する。具体的には、端末装置120は、筆跡データに含まれるペン先の座標値に基づいて表示手段128に表示された背景画像上に筆記内容が再現される位置を定め、属性情報に基づいて再現される筆記内容の属性(点や線等の太さ、色等)を定める。この場合、各端末装置120は、筆跡データに含まれる属性情報とは別に筆記内容が手書きされた局に応じて再現される筆記内容の属性を定めてもよい。例えば、手書き入力がされた端末装置120において当該端末装置120(局)を識別する局識別情報(例えば端末装置120のIPアドレスやMACアドレス)を筆跡データに付加し、各局において当該局識別情報に基づいて筆記内容を再現する。例えば親局の筆記内容については赤色で再現し、子局の筆記内容については青色で再現する等の態様が考えられる。   Next, the display server 104 transmits the handwriting data received from the parent station to each station including the parent station (S230). Then, in each station including the master station, the terminal device 120 reproduces the written content by superimposing it on the background image 146 as shown in FIG. 9 based on the handwriting data. Specifically, the terminal device 120 determines the position where the written content is reproduced on the background image displayed on the display unit 128 based on the coordinate value of the pen tip included in the handwriting data, and reproduces it based on the attribute information. Define the attributes of the written contents (thickness and color of dots and lines). In this case, each terminal device 120 may define the attribute of the written content that is reproduced according to the station where the written content is handwritten, in addition to the attribute information included in the handwriting data. For example, station identification information (for example, the IP address or MAC address of the terminal device 120) for identifying the terminal device 120 (station) in the terminal device 120 that has been handwritten is added to the handwriting data, and the station identification information is added to the station identification information in each station. Reproduce the written content based on it. For example, the writing contents of the master station are reproduced in red, and the writing contents of the slave station are reproduced in blue.

また、筆跡データに含まれる属性データが筆記内容の消去を示すものである場合、ペン先の座標値及び属性情報に基づいて、背景画像に重ねてすでに表示されている筆記内容を消去する。この場合、背景画像に重ねて表示されているすべての筆記内容を消去してもよく、また、所定の局の筆記内容のみを消去するようにしてもよい。   Further, when the attribute data included in the handwriting data indicates erasure of the written content, the written content already displayed over the background image is erased based on the coordinate value of the pen tip and the attribute information. In this case, all the written contents displayed on the background image may be erased, or only the written contents of a predetermined station may be erased.

続いて、会議を継続し(S250 No)、子局の手書き入力装置200において、例えば図10に示すように媒体上に文字等が筆記(同図では責任者のサインが筆記)されると(S190 Yes)、親局の場合と同様に筆記内容について筆跡データを生成する(S200)。そして、親局の場合と同様のステップにより(S210からS230)、各局において端末装置120は、筆跡データに基づいて、図11に示すように背景画像146及び親局において手書きされた筆記内容に重ねて、子局において手書きされた筆記内容を再現する(S240)。これにより、背景画像に再現された所定の筆記内容の上に、複数の局から他の筆記内容を重ね書きすることができる。   Subsequently, the conference is continued (No in S250), and when the handwriting input device 200 of the slave station writes characters on the medium as shown in FIG. 10, for example (in the figure, the signature of the responsible person is written) ( S190 Yes), handwriting data is generated for the written contents as in the case of the master station (S200). Then, through the same steps as in the case of the master station (S210 to S230), the terminal device 120 in each station superimposes the handwritten data handwritten in the background image 146 and the master station as shown in FIG. Then, the written content handwritten in the slave station is reproduced (S240). Thereby, the other written content from a plurality of stations can be overwritten on the predetermined written content reproduced in the background image.

この場合、表示システム100は、親局が承認した場合にのみ子局の手書き入力装置200において筆記された筆記内容を各局の表示手段128において再現するように制限する機能を有してもよい。例えば、親局から子局に、筆記された内容を各局の表示手段128において再現することができる記入権の要求があり、親局が当該要求に対して記入権を付与した場合にのみ、子局の手書き入力装置200において手書きされた筆記内容を各局の表示手段128において再現するよう構成する。例えば、表示サーバ104は子局が記入権を有している場合にのみ当該子局から受信した筆跡データを各局に送信したり、子局が記入権を有している場合にのみ当該子局の端末装置120が表示サーバ104に筆跡データを送信したりするように構成する。   In this case, the display system 100 may have a function of restricting the written contents written in the handwriting input device 200 of the slave station to be reproduced on the display means 128 of each station only when the master station approves. For example, there is a request for entry right from the parent station to the child station so that the written contents can be reproduced on the display means 128 of each station, and only when the parent station grants entry right to the request. The handwritten contents handwritten in the station handwriting input device 200 are configured to be reproduced on the display means 128 of each station. For example, the display server 104 transmits handwriting data received from the slave station to each station only when the slave station has an entry right, or only when the slave station has an entry right. The terminal device 120 is configured to transmit handwriting data to the display server 104.

以上、本発明を実施形態を通じて説明したが、上記発明の実施形態を通じて説明された実施例や応用例は、用途に応じて適宜に組み合わせて、又は変更若しくは改良を加えて用いることができ、本発明は上述した実施形態の記載に限定されるものではない。そのような組み合わせ又は変更若しくは改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated through embodiment, the Example and application example which were demonstrated through embodiment of the said invention can be used combining suitably or adding a change or improvement according to a use. The invention is not limited to the description of the above-described embodiment. It is apparent from the description of the scope of claims that the embodiments added with such combinations or changes or improvements can be included in the technical scope of the present invention.

本発明の一実施形態に係る表示システム100を示す図である。1 is a diagram showing a display system 100 according to an embodiment of the present invention. 端末装置120の構成を示す機能ブロック図である。3 is a functional block diagram illustrating a configuration of a terminal device 120. FIG. 手書き入力装置200の外観を示す図である。FIG. 2 is a diagram illustrating an appearance of a handwriting input device 200. 手書き入力装置200の構成を示す機能ブロック図である。3 is a functional block diagram showing a configuration of a handwriting input device 200. FIG. 本実施形態に係る表示システム100の動作の一例を示すフローチャートである。It is a flowchart which shows an example of operation | movement of the display system 100 which concerns on this embodiment. 表示手段128に表示される表示画面の一例を示す図である。It is a figure which shows an example of the display screen displayed on the display means. 媒体が手書き入力装置200に載置された状態を示す図である。FIG. 4 is a diagram illustrating a state where a medium is placed on a handwriting input device 200. 親局の手書き入力装置200に載置された媒体に手書き入力された状態を示す図である。It is a figure which shows the state by which the handwritten input was carried out to the medium mounted in the handwritten input device 200 of a master station. 各局の表示手段128において親局の筆記内容が再現された状態を示す図である。It is a figure which shows the state by which the writing content of the master station was reproduced in the display means 128 of each station. 子局の手書き入力装置200に載置された媒体に手書き入力された状態を示す図である。It is a figure which shows the state input by handwriting on the medium mounted in the handwriting input device 200 of a slave station. 各局の表示手段128において子局の筆記内容がさらに再現された状態を示す図である。It is a figure which shows the state in which the writing content of the slave station was further reproduced in the display means 128 of each station.

符号の説明Explanation of symbols

100・・・表示システム
102・・・会議サーバ
104・・・表示サーバ
110・・・通信回線
120・・・端末装置
128・・・表示手段
129・・・ドライブ
134・・・印刷制御手段
140・・・印刷装置
200・・・手書き入力装置
202・・・カメラ
204・・・マイク
206・・・スピーカ
210・・・筐体
220・・・センサボード
222・・・基準マーク
224・・・基準マーク
230・・・ペン
240・・・クリップ
250・・・属性入力手段
270・・・タイムスタンプ生成手段
DESCRIPTION OF SYMBOLS 100 ... Display system 102 ... Conference server 104 ... Display server 110 ... Communication line 120 ... Terminal device 128 ... Display means 129 ... Drive 134 ... Print control means 140- ..Printing device 200 ... Handwriting input device 202 ... Camera 204 ... Microphone 206 ... Speaker 210 ... Case 220 ... Sensor board 222 ... Reference mark 224 ... Reference mark 230 ... pen 240 ... clip 250 ... attribute input means 270 ... time stamp generation means

Claims (15)

背景画像データに基づいて背景画像を表示する表示手段と、
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段と、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現手段と、
を備えたことを特徴とする端末装置。
Display means for displaying a background image based on the background image data;
Accepting means for receiving handwriting data indicating handwritten content placed on a medium on which the background image is drawn, which is placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. Reproduction means to display the contents,
A terminal device comprising:
前記背景画像データを、通信回線を介して受信する受信手段をさらに備えたことを特徴とする請求項1に記載の端末装置。   The terminal device according to claim 1, further comprising receiving means for receiving the background image data via a communication line. 前記背景画像データに基づいて、印刷装置に、前記媒体上に前記背景画像を印刷させる印刷制御手段をさらに備えたことを特徴とする請求項1に記載の端末装置。   The terminal device according to claim 1, further comprising: a print control unit that causes the printing apparatus to print the background image on the medium based on the background image data. 前記印刷制御手段は、前記手書き入力装置において前記媒体を載置する領域に応じて、前記背景画像を少なくとも一の方向に拡大又は縮小して前記印刷装置に印刷させることを特徴とする請求項3に記載の端末装置。   4. The printing control unit according to claim 3, wherein the background image is enlarged or reduced in at least one direction according to a region where the medium is placed in the handwriting input device, and is printed on the printing device. The terminal device described in 1. 前記媒体において前記背景画像が印刷された印刷領域における座標と、前記表示手段により前記背景画像が表示された表示領域における座標と、を対応づけた座標データを記憶する記憶手段をさらに備え、
前記再現手段は、前記座標データに基づいて、表示された前記背景画像に重ねて前記筆記内容を表示することを特徴とする請求項4に記載の端末装置。
Storage means for storing coordinate data in which coordinates in a print area where the background image is printed on the medium and coordinates in a display area where the background image is displayed by the display means are stored;
The terminal device according to claim 4, wherein the reproduction unit displays the written content on the background image displayed based on the coordinate data.
前記印刷制御手段は、前記媒体において前記印刷装置が印刷可能な領域に基づいて、前記背景画像を少なくとも一の方向に拡大又は縮小することを特徴とする請求項4に記載の端末装置。   The terminal apparatus according to claim 4, wherein the print control unit enlarges or reduces the background image in at least one direction based on an area of the medium that can be printed by the printing apparatus. 前記印刷制御手段は、前記手書き入力装置に前記媒体を載置する方向を示す基準マークを、前記印刷装置にさらに印刷させることを特徴とする請求項3に記載の端末装置。   The terminal device according to claim 3, wherein the print control unit causes the printing apparatus to further print a reference mark indicating a direction in which the medium is placed on the handwriting input device. 請求項1から7のいずれか1項に記載の端末装置である第1の端末装置及び第2の端末装置と、当該第1の端末装置及び当該第2の端末装置と通信回線を介して接続されたサーバと、を備え、
前記第1の端末装置は、前記背景画像データを前記通信回線を介して前記サーバに送信し、
前記サーバは、前第1の端末装置から受信した前記背景画像データを前記通信回線を介して前記第2の端末装置に送信し、
前記第2の端末装置は、前記サーバから受信した前記背景画像データに基づいて前記背景画像を表示することを特徴とする表示システム。
A first terminal device and a second terminal device, which are the terminal devices according to any one of claims 1 to 7, and the first terminal device and the second terminal device connected via a communication line A server, and
The first terminal device transmits the background image data to the server via the communication line,
The server transmits the background image data received from the previous first terminal device to the second terminal device via the communication line,
The display system, wherein the second terminal device displays the background image based on the background image data received from the server.
前記第2の端末装置は、前記第1の端末装置から前記背景画像を表示する要求があった場合に、前記背景画像を表示することを特徴とする請求項8に記載の表示システム。   The display system according to claim 8, wherein the second terminal device displays the background image when there is a request to display the background image from the first terminal device. 前記第1の端末装置は、当該第1の端末装置において受け付けた前記筆跡データである第1の筆跡データを前記サーバに送信し、
前記サーバは、前記第1の筆跡データを少なくとも前記第2の端末装置に送信し、
前記第2の端末装置は、前記第1の筆跡データが示す前記筆記内容を表示することを特徴とする請求項8に記載の表示システム。
The first terminal device transmits first handwriting data, which is the handwriting data received in the first terminal device, to the server,
The server transmits the first handwriting data to at least the second terminal device,
The display system according to claim 8, wherein the second terminal device displays the writing content indicated by the first handwriting data.
前記第2の端末装置は、当該第2の端末装置において受け付けた前記筆跡データである第2の筆跡データを前記サーバに送信し、
前記サーバは、前記第2の筆跡データを少なくとも前記第1の端末装置にさらに送信し、
前記第1の端末装置は、前記第2の筆跡データが示す前記筆記内容をさらに表示することを特徴とする請求項10に記載の表示システム。
The second terminal device transmits second handwriting data, which is the handwriting data received in the second terminal device, to the server,
The server further transmits the second handwriting data to at least the first terminal device,
The display system according to claim 10, wherein the first terminal device further displays the writing content indicated by the second handwriting data.
請求項1から7のいずれか1項に記載の端末装置である第1の端末装置及び第2の端末装置を備え、
前記第1の端末装置は、前記背景画像と当該背景画像に重ねて表示された前記筆記内容とを含む合成画像を生成して前記第2の端末装置に送信し、
前記第2の端末装置は、前記合成画像を前記第2の端末装置における前記背景画像として表示することを特徴とする表示システム。
A first terminal device and a second terminal device which are the terminal devices according to any one of claims 1 to 7,
The first terminal device generates a composite image including the background image and the writing content displayed superimposed on the background image, and transmits the composite image to the second terminal device.
The second terminal device displays the composite image as the background image in the second terminal device.
コンピュータを、
背景画像データに基づいて背景画像を表示する表示手段、
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現手段、
として機能させるためのプログラム。
Computer
Display means for displaying a background image based on the background image data;
Accepting means for receiving handwriting data indicating handwritten content placed on a medium on which the background image is drawn, placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. Reproduction means to display the contents,
Program to function as.
コンピュータを、
背景画像データに基づいて背景画像を表示する表示手段、
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現手段、
として機能させるためのプログラムを格納した記録媒体。
Computer
Display means for displaying a background image based on the background image data;
Accepting means for receiving handwriting data indicating handwritten content placed on a medium on which the background image is drawn, placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. Reproduction means to display the contents,
A recording medium that stores a program for functioning as a computer.
背景画像データに基づいて背景画像を表示する表示ステップと、
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付ステップと、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現ステップと
を備えたことを特徴とする表示方法。
A display step for displaying the background image based on the background image data;
An accepting step of receiving handwriting data indicating handwritten content handwritten on a medium on which the background image is drawn placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. A display method comprising: a reproduction step for displaying contents.
JP2008267251A 2008-10-16 2008-10-16 Terminal device, display system, display method, program, and recording medium Pending JP2009048656A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008267251A JP2009048656A (en) 2008-10-16 2008-10-16 Terminal device, display system, display method, program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008267251A JP2009048656A (en) 2008-10-16 2008-10-16 Terminal device, display system, display method, program, and recording medium

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2003171314A Division JP2005010863A (en) 2003-06-16 2003-06-16 Terminal equipment, display system, display method, program and recording medium

Publications (1)

Publication Number Publication Date
JP2009048656A true JP2009048656A (en) 2009-03-05

Family

ID=40500743

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008267251A Pending JP2009048656A (en) 2008-10-16 2008-10-16 Terminal device, display system, display method, program, and recording medium

Country Status (1)

Country Link
JP (1) JP2009048656A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011125643A1 (en) * 2010-03-31 2011-10-13 ブラザー工業株式会社 Display system and display method
JP2015102925A (en) * 2013-11-22 2015-06-04 シャープ株式会社 Hand-written image display system, hand-written image display method, and hand-written image display program
JP2019531540A (en) * 2016-08-16 2019-10-31 マイスクリプト System and method for collaborative ink management
JP2020102275A (en) * 2013-11-19 2020-07-02 株式会社ワコム Method for outputting digital ink, device for outputting digital ink, and program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5720884A (en) * 1980-07-11 1982-02-03 Nippon Atom Ind Group Co Ltd Hand write input method of electronic computer at atomic power plant
JPH05207461A (en) * 1992-01-24 1993-08-13 Mitsubishi Electric Corp Still picture hand-written conference system
JPH08171455A (en) * 1994-12-20 1996-07-02 Tec Corp Electronic board system
JP2002027174A (en) * 2000-07-04 2002-01-25 Toshio Kato Network idea communication system
JP2005010863A (en) * 2003-06-16 2005-01-13 Toho Business Kanri Center:Kk Terminal equipment, display system, display method, program and recording medium

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5720884A (en) * 1980-07-11 1982-02-03 Nippon Atom Ind Group Co Ltd Hand write input method of electronic computer at atomic power plant
JPH05207461A (en) * 1992-01-24 1993-08-13 Mitsubishi Electric Corp Still picture hand-written conference system
JPH08171455A (en) * 1994-12-20 1996-07-02 Tec Corp Electronic board system
JP2002027174A (en) * 2000-07-04 2002-01-25 Toshio Kato Network idea communication system
JP2005010863A (en) * 2003-06-16 2005-01-13 Toho Business Kanri Center:Kk Terminal equipment, display system, display method, program and recording medium

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011125643A1 (en) * 2010-03-31 2011-10-13 ブラザー工業株式会社 Display system and display method
JP2020102275A (en) * 2013-11-19 2020-07-02 株式会社ワコム Method for outputting digital ink, device for outputting digital ink, and program
JP2015102925A (en) * 2013-11-22 2015-06-04 シャープ株式会社 Hand-written image display system, hand-written image display method, and hand-written image display program
JP2019531540A (en) * 2016-08-16 2019-10-31 マイスクリプト System and method for collaborative ink management
US11409952B2 (en) 2016-08-16 2022-08-09 Myscript System and method for collaborative ink management
US11709992B2 (en) 2016-08-16 2023-07-25 Myscript System and method for collaborative ink management

Similar Documents

Publication Publication Date Title
KR100799644B1 (en) Terminal device, display system, display method, and recording medium storing program
US20200150917A1 (en) Method and device for sharing content
US10572779B2 (en) Electronic information board apparatus, information processing method, and computer program product
US6930673B2 (en) Collaborative input system
US20110047485A1 (en) Information processing apparatus, conference system and information processing method
US20160117142A1 (en) Multiple-user collaboration with a smart pen system
JP2014515512A (en) Content selection in pen-based computer systems
US9420144B2 (en) Image forming device to provide preview image for editing manuscript image, display apparatus to display and edit the preview image, and methods thereof
JP2008217782A (en) Paper-based meeting service management tool and system
US20140152543A1 (en) System, data providing method and electronic apparatus
CN102037476B (en) Decoupled applications for printed materials
CA2929908A1 (en) System and method of communicating between interactive systems
US20190065030A1 (en) Display apparatus and control method thereof
JP2022020703A (en) Handwriting device and speech and handwriting communication system
JP4021249B2 (en) Information processing apparatus and information processing method
JP2009048656A (en) Terminal device, display system, display method, program, and recording medium
CN113495708A (en) Output device, output system, format information changing method, recording medium, and controller
JP4348831B2 (en) Handwritten input data display system, coordinate data input device, display device, and handwritten input data display device
JP7242674B2 (en) Electronic devices, methods of driving electronic devices, and methods of controlling data recording applications
JP2009070007A (en) Information processor and information processing program
JP7388159B2 (en) Display device, display method
US20200272289A1 (en) Information processing apparatus and non-transitory computer readable medium
JP2002023603A (en) Correction system
JP2013084146A (en) Electronic pen system and program
JP2020021199A (en) Sharing terminal, communication system, presentation method, and program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20090323

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090323

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100608

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120207