JP2009048656A - Terminal device, display system, display method, program, and recording medium - Google Patents
Terminal device, display system, display method, program, and recording medium Download PDFInfo
- Publication number
- JP2009048656A JP2009048656A JP2008267251A JP2008267251A JP2009048656A JP 2009048656 A JP2009048656 A JP 2009048656A JP 2008267251 A JP2008267251 A JP 2008267251A JP 2008267251 A JP2008267251 A JP 2008267251A JP 2009048656 A JP2009048656 A JP 2009048656A
- Authority
- JP
- Japan
- Prior art keywords
- background image
- terminal device
- data
- medium
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、端末装置、表示システム、表示方法、プログラム、及び記録媒体に関する。特に本発明は、手書き入力された情報を表示手段において正確に再現することができる端末装置、表示システム、表示方法、プログラム、及び記録媒体に関する。 The present invention relates to a terminal device, a display system, a display method, a program, and a recording medium. In particular, the present invention relates to a terminal device, a display system, a display method, a program, and a recording medium that can accurately reproduce information input by handwriting on a display means.
従来の会議システムとして、特開2002−44284号公報(特許文献1)に開示されたものがある。上記特許文献1に開示された会議システムは、複数のモバイルホワイトボードを備えて構成されており、モバイルホワイトボードに情報が入力されると、すべてのモバイルホワイトボードにこの情報が表示されることにより会議を行うシステムである。モバイルホワイトボードは表示部を備えており、当該表示部において入力ペンで手書きすることにより情報を入力する。
しかし、液晶画面等の表示部に手書き入力する場合、ペン先と表示部上に表示される筆跡との間に視差等に基づくずれが生じるため、ユーザは入力する際に不自然さを感じる場合が多い。また、液晶画面等の表面は、ペンをスムーズに移動させることが材質的に難しく、美しく文字等を記載することは甚だ困難であった。 However, when handwritten input is performed on a display unit such as a liquid crystal screen, the user feels unnaturalness when inputting because a deviation based on parallax or the like occurs between the pen tip and the handwriting displayed on the display unit. There are many. Further, it is difficult to smoothly move the pen on the surface of the liquid crystal screen or the like, and it is extremely difficult to write characters and the like beautifully.
よって、本発明は、上記の課題を解決することのできる端末装置、表示システム、表示方法、プログラム、及び記録媒体を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。 Therefore, an object of this invention is to provide the terminal device, display system, display method, program, and recording medium which can solve said subject. This object is achieved by a combination of features described in the independent claims. The dependent claims define further advantageous specific examples of the present invention.
上記課題を解決するため、本発明の第1の形態によれば、背景画像データに基づいて背景画像を表示する表示手段と、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段と、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現手段と、を備えたことを特徴とする端末装置を提供する。 In order to solve the above-described problem, according to the first aspect of the present invention, a display unit that displays a background image based on background image data, and a medium placed on a handwritten input device on which a background image is drawn. Accepting handwriting data indicating the handwritten handwritten content, and based on the handwriting data, the position of the handwritten content in the background image on the medium and the position of the background image displayed by the displaying means correspond to each other. There is provided a terminal device characterized by comprising reproduction means for displaying written contents superimposed on a displayed background image.
当該端末装置は、背景画像データを、通信回線を介して受信する受信手段をさらに備えるのが好ましく、また、背景画像データに基づいて、印刷装置に、媒体上に背景画像を印刷させる印刷制御手段をさらに備えるのが好ましい。 The terminal device preferably further includes receiving means for receiving the background image data via a communication line, and print control means for causing the printing apparatus to print the background image on the medium based on the background image data. Is preferably further provided.
印刷制御手段は、手書き入力装置において媒体を載置する領域に応じて、背景画像を少なくとも一の方向に拡大又は縮小して印刷装置に印刷させるのが好ましい。この場合、当該端末装置は、媒体において背景画像が印刷された印刷領域における座標と、表示手段により背景画像が表示された表示領域における座標と、を対応づけた座標データを記憶する記憶手段をさらに備え、再現手段は、座標データに基づいて、表示された背景画像に重ねて筆記内容を表示するのが好ましい。 The print control means preferably causes the printing apparatus to print the background image by enlarging or reducing the background image in at least one direction in accordance with the area on which the medium is placed in the handwriting input device. In this case, the terminal device further includes storage means for storing coordinate data in which the coordinates in the print area where the background image is printed on the medium and the coordinates in the display area where the background image is displayed by the display means are associated. The prepared and reproducing means preferably displays the written contents on the displayed background image based on the coordinate data.
印刷制御手段は、媒体において印刷装置が印刷可能な領域に基づいて、背景画像を少なくとも一の方向に拡大又は縮小してもよい。また、印刷制御手段は、手書き入力装置に媒体を載置する方向を示す基準マークを、印刷装置にさらに印刷させてもよい。 The print control means may enlarge or reduce the background image in at least one direction based on an area of the medium that can be printed by the printing apparatus. The print control unit may further cause the printing apparatus to print a reference mark indicating a direction in which the medium is placed on the handwriting input device.
本発明の第2の形態によれば、上記の端末装置である第1の端末装置及び第2の端末装置と、当該第1の端末装置及び当該第2の端末装置と通信回線を介して接続されたサーバと、を備え、第1の端末装置は、背景画像データを通信回線を介してサーバに送信し、サーバは、前第1の端末装置から受信した背景画像データを通信回線を介して第2の端末装置に送信し、第2の端末装置は、サーバから受信した背景画像データに基づいて背景画像を表示することを特徴とする表示システムを提供する。 According to the 2nd form of this invention, it connects with the said 1st terminal device and the said 2nd terminal device via a communication line with the said 1st terminal device and the 2nd terminal device which are said terminal devices. The first terminal device transmits the background image data to the server via the communication line, and the server transmits the background image data received from the previous first terminal device via the communication line. Transmitting to a second terminal device, the second terminal device provides a display system characterized by displaying a background image based on background image data received from a server.
第2の端末装置は、第1の端末装置から背景画像を表示する要求があった場合に、背景画像を表示するのが好ましい。また、第1の端末装置は、当該第1の端末装置において受け付けた筆跡データである第1の筆跡データをサーバに送信し、サーバは、第1の筆跡データを少なくとも第2の端末装置に送信し、第2の端末装置は、第1の筆跡データが示す筆記内容を表示することが好ましい。 The second terminal device preferably displays the background image when there is a request to display the background image from the first terminal device. The first terminal device transmits first handwriting data, which is handwriting data received by the first terminal device, to the server, and the server transmits the first handwriting data to at least the second terminal device. And it is preferable that a 2nd terminal device displays the writing content which 1st handwriting data show.
第2の端末装置は、当該第2の端末装置において受け付けた筆跡データである第2の筆跡データをサーバに送信し、サーバは、第2の筆跡データを少なくとも第1の端末装置にさらに送信し、第1の端末装置は、第2の筆跡データが示す筆記内容をさらに表示することが好ましい。 The second terminal device transmits second handwriting data, which is handwriting data received by the second terminal device, to the server, and the server further transmits the second handwriting data to at least the first terminal device. The first terminal device preferably further displays the written content indicated by the second handwriting data.
本発明の第3の形態によれば、上記の端末装置である第1の端末装置及び第2の端末装置を備え、第1の端末装置は、背景画像と当該背景画像に重ねて表示された筆記内容とを含む合成画像を生成して第2の端末装置に送信し、第2の端末装置は、合成画像を第2の端末装置における背景画像として表示することを特徴とする表示システムを提供する。 According to the 3rd form of this invention, it was provided with the 1st terminal device and 2nd terminal device which are said terminal devices, and the 1st terminal device was displayed on the background image and the said background image so that it overlapped A display system is provided that generates a composite image including written content and transmits the composite image to a second terminal device, and the second terminal device displays the composite image as a background image in the second terminal device. To do.
本発明の第4の形態によれば、コンピュータを、背景画像データに基づいて背景画像を表示する表示手段、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現手段、として機能させるためのプログラムを提供する。 According to the fourth aspect of the present invention, the computer displays the background image based on the background image data, and the writing handwritten on the medium on which the background image is drawn placed on the handwriting input device. Accepting means for accepting handwriting data indicating the contents, based on the handwriting data, the displayed background image corresponds to the position of the handwritten content in the background image on the medium and the position of the background image displayed by the displaying means. Provided is a program for functioning as a reproduction means for displaying written contents in a superimposed manner.
本発明の第5の形態によれば、コンピュータを、背景画像データに基づいて背景画像を表示する表示手段、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現手段、として機能させるためのプログラムを格納した記録媒体を提供する。 According to the fifth aspect of the present invention, the computer displays the background image on the basis of the background image data, and the writing handwritten on the medium on which the background image is drawn placed on the handwriting input device. Accepting means for accepting handwriting data indicating the contents, based on the handwriting data, the displayed background image corresponds to the position of the handwritten content in the background image on the medium and the position of the background image displayed by the displaying means. Provided is a recording medium storing a program for causing it to function as a reproduction means for displaying written contents in an overlapping manner.
本発明の第6の形態によれば、背景画像データに基づいて背景画像を表示する表示ステップと、手書き入力装置に載置された、背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付ステップと、筆跡データに基づいて、媒体上の背景画像における筆記内容の位置と表示手段により表示された背景画像の位置とが対応するように、表示された背景画像に重ねて筆記内容を表示する再現ステップと、を備えたことを特徴とする表示方法を提供する。 According to the sixth aspect of the present invention, the display step of displaying the background image based on the background image data, and the written content handwritten on the medium on which the background image is drawn placed on the handwriting input device. A reception step for receiving handwriting data to be displayed, and based on the handwriting data, the position of the handwritten content in the background image on the medium and the position of the background image displayed by the display means are overlaid on the displayed background image. And a reproduction step for displaying the written content.
なお、本明細書において、手段とは、単に物理的手段を意味するものではなく、その手段が有する機能をソフトウェアによって実現する場合も含む。また、1つの手段が有する機能が2つ以上の物理的手段により実現されても、2つ以上の手段の機能が1つの物理的手段により実現されてもよい。 In this specification, the term “means” does not simply mean a physical means, but also includes a case where the functions of the means are realized by software. Further, the function of one means may be realized by two or more physical means, or the functions of two or more means may be realized by one physical means.
以下、図面を参照しつつ、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また、実施形態の中で説明されている特徴の組み合わせのすべてが発明の解決手段に必須であるとは限らない。 Hereinafter, the present invention will be described through embodiments of the invention with reference to the drawings. However, the following embodiments do not limit the invention according to the claims, and are described in the embodiments. Not all combinations of features are essential for the solution of the invention.
図1は、本発明の一実施形態に係る表示システム100を示す図である。表示システム100は、インターネット、専用回線、LAN等の通信回線110にアクセス可能に設けられた会議サーバ102及び表示サーバ104と、通信回線110にアクセス可能に設けられた複数の端末装置120(例えばパーソナルコンピュータ)とを備えて構成される。
FIG. 1 is a diagram showing a
端末装置120には、手書き入力装置200及び印刷装置140が接続されており、端末装置120、手書き入力装置200、及び印刷装置140により各ユーザが使用する端末システムが構築される。
そして、各端末装置120が会議サーバ102及び表示サーバ104にアクセスすることにより会議システムが構築されるとともに、当該会議システム上に表示システムが構築される。そして、各手書き入力装置200に載置された媒体に手書きされた筆記内容を、各端末装置120において表示させることにより、通信回線110上において会議を行うことができる。
A
Each
具体的には、所定の端末装置120において会議の参加者であるユーザが音声、文字、画像等を入力し、他の端末装置120において当該音声、文字、画像等を出力する。こうして各端末装置120のユーザ間でコミュニケーションをとることにより、通信回線110上で会議を行う。
Specifically, a user who is a participant in a conference inputs a voice, a character, an image, etc. at a
さらに、本実施形態の表示システム100では、手書き入力装置200に載置された、所定の背景画像が描かれた媒体上にユーザが手書きした筆記内容を、各端末装置120のモニタに表示された当該所定の背景画像と重ねて表示させるにより会議を行うことができる。これにより、通信回線110上において会議を行う場合であっても、媒体の所望の位置に所望の文字等の情報を容易に手書き入力でき、かつ各端末装置120のユーザ間で当該情報を正確に共有できるため、会議をスムーズに進めることができる。
Furthermore, in the
図2は、端末装置120の構成を示す機能ブロック図である。端末装置120は、CPU122と、ROM124と、RAM126と、HDD127と、表示手段128と、記録媒体の一例であるCD−ROM131に格納されたプログラムを読み出すCD−ROMドライブ129と、外部装置IF手段130と、通信IF手段132と、印刷制御手段134とを備えて構成される。CD−ROMドライブ129は、記録媒体に格納されたプログラムを読み出す手段の一例であって、磁気ディスクドライブ、DVDドライブ等の他の記録媒体を読み出し可能な手段であってもよい。
FIG. 2 is a functional block diagram illustrating the configuration of the
CPU122は、ROM124、HDD127及び/又はCD−ROM131に格納された、オペレーションシステム、会議システムプログラム、表示システムプログラム等のプログラムを読み出し、当該プログラムに基づいて本端末装置120の全体動作を制御する。各システムはソフトウェアプログラムとして単独で又は組み合わされてCD−ROM131等の記録媒体又は通信回線110を介して供給可能である。また、CPU122は、RAM124を、手書き入力装置200から受け付けた筆跡データ等のデータを格納するワークエリア等として使用する。
The
表示手段128は、モニタやプロジェクタといった画像や文字等を表示する表示装置であり、会議に使用する背景画像や手書き入力装置200において手書きされた筆記内容を表示する。また、表示手段128は、当該装置に画像等を表示させる手段(例えばビデオボードやデバイスドライバ等)を含んでもよい。また、表示手段128は、端末装置120と別個に設けられてもよい。
The
外部装置IF手段130は、手書き入力装置200、カメラ202、マイク204、及びスピーカ206等の外部装置とデータの受け渡しを行う。外部装置IF手段130は、USB、RS−232C、IEEE1394等の通信規格に対応するチップやコネクタ等の通信機能を実現するための物理的手段や、デバイスドライバといった通信機能を実現するためのソフトウェアを含む。また、外部装置IF手段130は無線通信手段であってもよい。
The external device IF
外部装置IF130は、カメラ202が取得した画像の画像データ、マイク204が取得した音声の音声データ、及び手書き入力装置200に載置された媒体に手書きされた筆記内容を示す筆跡データを受け取る。また、外部装置IF130は、通信回線110を介して端末装置120が受け取った音声データをスピーカ206に受け渡し、当該音声を再生させる。
The external device IF 130 receives image data acquired by the
通信IF手段132は、通信回線110を介して当該通信回線110に接続された会議サーバ102及び表示サーバ104、並びに他の端末装置120等と、背景画像データや筆跡データを送受信する等の通信を行う。通信IF手段132は無線通信手段であってもよい。
The communication IF
印刷制御手段134は、背景画像データに基づいて媒体上に背景画像を印刷装置140に印刷させるべく、端末装置120に接続された印刷装置140を制御する。ここで媒体とは、印刷用紙等の紙媒体や、プラスチック、ガラス等の印刷装置140や手書き入力装置200のペン230により文字、図形等を描くことができる媒体である。
The
図3は、手書き入力装置200の外観を示す図である。手書き入力装置200は、筐体210と、筐体210において背景画像が描かれた媒体が載置されるセンサボード220と、センサボード220上に載置された媒体に文字等を手書きするためのペン230と、センサボード220上に媒体を固定するためのクリップ240と、媒体に手書きされた筆記内容を表示手段128(図2参照)に再現するときの当該筆記内容の属性を受け付ける属性入力手段250と、媒体に手書きされた筆記内容を示す筆跡データを端末装置120に送信するための通信IF手段260とを備えて構成される。
FIG. 3 is a diagram illustrating an appearance of the
図4は、手書き入力装置200の構成を示す機能ブロック図である。手書き入力装置200は、本手書き入力装置200の全体動作を制御するCPU210と、CPU210のためのプログラムを格納したROM212と、媒体上に手書き入力された筆記内容から筆跡データを生成するためのワークエリア等として使用されるRAM214と、センサボード220においてペン先が検出されたタイミングを示すタイムスタンプデータを生成するタイムスタンプ生成手段とを備えて構成される。
FIG. 4 is a functional block diagram showing the configuration of the
センサボード220は、ペン230から放出される電磁波の電界強度を検出する機能を備えている。センサボード220は、ペン230がセンサボード220に近接した場合、ペン230から放出された電磁波を検出することでセンサボード220(媒体)上におけるペン先の位置を検出する。この場合、例えば、ペン230を用いて筆記媒体上に筆記する(ペン230が筆記媒体に接する)ことを条件として、ペン先の位置を検出するように構成してもよい。
The
センサボード220におけるペン先の位置は、センサボード220の基準位置を原点とした2次元座標系上の座標値として特定される。センサボード220は、所定のタイミングでペン先の位置をサンプリングしRAM214に格納する。サンプリング間隔は、ペン230の速い動きを検出できる程度の時間間隔、例えば100回/秒以上の一定間隔に設定されるのが望ましい。
The position of the pen tip on the
RAM214は、CPU210のワークエリアとして利用される。なお、端末装置120等から転送されたプログラムを実行するように構成する場合には、プログラム領域としても使用される。ワークエリアは、例えば、センサボード220によって検出されたペン先の座標値を記憶するエリアや、ペン先の座標値が検出された時間を記憶するエリアや、当該座標値及び時間に基づき生成された筆跡データを記憶するエリア等により構成される。
The
属性入力手段250は、ユーザにより媒体に手書きされる筆記内容の属性をユーザから受け付ける。本実施形態で属性入力手段250は、ユーザがペン230を用いて筐体210に設けられた属性入力手段250に触れることにより、表示手段128に再現される筆記内容の属性を受け付けるよう構成されている。
The
ここで、筆記内容の属性とは、媒体に手書きされた筆記内容を端末装置120の表示手段128に表示するときの当該筆記内容(媒体に手書きされた点や線)の太さや色等である。また、筆記内容の属性は、媒体にペン230で手書きすることにより表示手段128にすでに表示されている筆記内容を消去する消しゴム及びその太さを含む。
Here, the attribute of the written content is the thickness or color of the written content (dots or lines handwritten on the medium) when the written content handwritten on the medium is displayed on the
通信IF手段260は、端末装置120と通信を行う手段であって、生成された筆跡データを端末装置120に送信する。通信IF手段260は、USB、RS−232C、IEEE1394等の通信規格に対応するチップやコネクタ等の通信機能を実現するための物理的手段や、デバイスドライバといった通信機能を実現するためのソフトウェアを含む。また、通信IF手段260は無線通信手段であってもよい。
The communication IF
タイムスタンプ生成手段270は、センサボード220においてペン先の位置が検出されたタイミングを示すタイムスタンプデータを生成する。例えば、タイムスタンプ生成手段270は、所定の周期で論理値を変化させるクロック信号を生成する手段と、当該論理値の変化に基づいて値をカウントする手段とを有するように構成される。センサボード220により検出されたペン先の座標値は、当該座標値が検出されたタイミングを示すタイムスタンプデータと対応づけられた時系列データとしてRAM214に格納される。
The time stamp generating means 270 generates time stamp data indicating the timing at which the pen tip position is detected on the
センサボード220は、タイムスタンプ生成手段270が生成したタイムスタンプデータに基づいて、所定の時間間隔でペン先の位置をサンプリングしてもよい。この場合、センサボード220は、検出したペン先の座標値とタイムスタンプデータとを対応づけることにより、時系列データとしてRAM214に格納する。
The
CPU210は、RAM214に格納された座標値の時系列データに属性入力手段250で受け付けた筆記内容の属性情報を対応づけて筆跡データを生成する。また、CPU210は、必要に応じて手書き入力装置200を識別する機器識別情報(例えばMACアドレス)を筆跡データに付加してもよい。
The
また、CPU210は、上述したタイムスタンプ生成手段270に代えて、定期的に内部クロックを参照して生成したタイムスタンプデータをキャラクタコード又はバイナリコードで筆跡データに付加してもよい。また、手書き入力装置200は、ペン先の座標値及び属性情報を端末装置120に送信し、端末装置120においてペン先の座標値及び属性情報にタイムスタンプデータを付加することにより筆跡データを生成してもよい。
Further, instead of the time stamp generating means 270 described above, the
図5は、本実施形態に係る表示システム100の動作の一例を示すフローチャートである。以下、本実施形態に係る表示システム100を用いて端末装置120のユーザが通信回線110上で会議を行うときの表示システム100の動作について説明する。なお、以下において通信回線110に複数の端末装置120がアクセス可能に設けられている形態について説明するが、会議システムを構築する端末装置120がある拠点を局と呼び、当該会議の司会を行うユーザが使用する端末装置120がある局を親局、他のユーザが使用する端末装置120がある局を子局とする。
FIG. 5 is a flowchart showing an example of the operation of the
まず、各端末装置120の表示手段128に表示する背景画像データを親局において取得する(S110)。背景画像データは、例えばJPEG、BMP、GIF等の表示手段128に表示可能な画像ファイルとして取得される。背景画像データは、紙媒体等に描かれた背景画像をスキャナ等の画像入力装置によって取得してもよく、また、文書作成ソフトウェアや画像作成ソフトウェアを用いて作成した文書等を画像データに変換することにより取得してもよい。また、インターネットサイトにアップロードされている画像データをダウンロードすることにより背景画像データを取得してもよい。
First, background image data to be displayed on the display means 128 of each
次に、親局及び各子局を会議サーバ102及び表示サーバ104に接続する(S120)。親局及び各子局のユーザは、当該端末装置120に予めインストールされたプログラムを起動し、会議サーバ102及び表示サーバ104にアクセスすることにより、各端末装置120を会議サーバ102及び表示サーバ104に接続する。これにより、通信回線110上に会議システムが構築されるとともに、当該会議システム上において表示システムが構築され、各局のユーザは通信回線110上で会議を行うことができる。
Next, the master station and each slave station are connected to the
次に、親局から表示サーバ104に背景画像データを送信する(S130)。そして、表示サーバ104は、親局から受け取った背景画像データを各子局に送信する(S140)。本実施形態では親局から子局に表示サーバ104を介して背景画像データを送信しているが、表示システム100の動作とは別に、例えば電子メール等の送信手段を用いて親局から子局に背景画像データを送信してもよい。
Next, the background image data is transmitted from the master station to the display server 104 (S130). Then, the
次に、各局において端末装置120は、当該端末装置120の表示手段128に表示される背景画像における座標値と、印刷装置140により媒体に印刷された背景画像における座標値とが対応するように、表示サーバ104から受け取った背景画像を少なくとも一の方向に拡大又は縮小する(S150)。本実施形態において端末装置120は、表示手段128に表示される背景画像と、媒体に印刷された背景画像とが相似するように、受け取った背景画像を少なくとも拡大又は縮小する。
Next, in each station, the
端末装置120は、例えば、手書き入力装置200において媒体が載置される領域(センサボード220)の形状や大きさに応じて、受け取った背景画像を拡大又は縮小する。この場合、端末装置120は、例えば当該領域についての情報を手書き入力装置200から受け取り、当該情報に基づいて受け取った背景画像を拡大又は縮小する。また、端末装置120は、ROM124若しくはRAM126又はHDD127に当該情報を予め格納しておいてもよい。当該情報は、ROM124若しくはRAM126又はHDD127に格納されたプログラムの一部であってもよい。
For example, the
また、端末装置120は、媒体において印刷装置140が印刷可能な領域に基づいて、受け取った背景画像を拡大又は縮小してもよい。例えば、端末装置120は、当該印刷可能な領域において背景画像が最も大きく印刷されるように背景画像を拡大又は縮小する。この場合、端末装置120は、例えば当該領域についての情報を印刷装置140から受け取り、当該情報に基づいて受け取った背景画像を拡大又は縮小する。また、端末装置120は、ROM124若しくはRAM126又はHDD127に当該情報を予め格納しておいてもよい。例えば、端末装置120は、ROM124若しくはRAM126又はHDD127に格納されたプリンタドライバ等のプログラムから当該情報を取得してもよい。
Further, the
次に、各局において端末装置120は、印刷装置140に、背景画像を媒体上に印刷させる(S160)。本実施形態において各局の端末装置120は、印刷装置140に、背景画像を拡大又は縮小するステップ(S150)において拡大又は縮小された背景画像を媒体上に印刷させる。これにより、センサボード220に載置された媒体上に手書きされた筆記内容を、表示手段128に表示された背景画像に重ねて正確に再現することができる。また、各局において端末装置120は、印刷装置140に、後述する背景画像に重ねて筆記内容を再現するステップ(S240)において背景画像に重ねて再現された筆記内容を含む画像を媒体に印刷させてもよい。
Next, in each station, the
次に、各局の端末装置120において表示手段128に背景画像を表示する(S170)。図6は、表示手段128に表示される表示画面(ウインドウ)の一例を示す図であり、この表示画面では、端末装置120に接続されたカメラ202により取得された各局のユーザの画像を表示する領域142と、背景画像146が表示される領域144(メインエリア)と、各局のユーザがテキストデータによりチャットをする領域146とが設けられている。
Next, a background image is displayed on the display means 128 in the
各局の端末装置120は、背景画像を拡大又は縮小するステップ(S150)において各端末装置120により拡大又は縮小された背景画像を表示手段128に表示する。各子局において端末装置120は、親局の端末装置120から背景画像を表示する要求があった場合に、背景画像を表示するのが好ましい。本実施形態では、親局の端末装置120において各局で表示すべき背景画像が選択された場合に、親局の端末装置120が表示サーバ104を介して各子局に当該選択された背景画像を表示するように要求する。
The
次に、各局において表示された背景画像に合う背景画像が印刷された媒体を、各端末装置120に接続された手書き入力装置200に載置する(S180)。具体的には、図7に示すように、手書き入力装置200のセンサボード220上に当該媒体を載置し、クリップ240により固定する。この場合、センサボード220の基準位置に、媒体の所定の位置を合わせて載置するのが望ましい。例えば、センサボード220の左上角位置に、媒体の四隅のいずれかが重なるように載置する。また、センサボード220に、後述する背景画像に重ねて筆記内容を再現するステップ(S240)において、背景画像に重ねて再現された筆記内容を含む画像が印刷された媒体を載置してもよい。
Next, a medium on which a background image matching the background image displayed at each station is printed is placed on the
また、端末装置120は、媒体に背景画像を印刷するステップ(S160)において、印刷装置140に、媒体上に基準マーク222を印刷させてもよい。そして、基準マーク222が手書き入力装置200に設けられた基準マーク224と合うように、媒体をセンサボード220に載置してもよい。
Further, the
本実施形態において背景画像を拡大又は縮小して媒体に印刷し、当該媒体を手書き入力装置200の所定の位置に載置することにより、後述する背景画像に重ねて筆記内容を再現するステップ(S240)において、背景画像が印刷された媒体上に手書きされた筆記内容を、表示手段128に表示された背景画像に重ねて正確に再現することができる。
In this embodiment, the background image is enlarged or reduced, printed on a medium, and the medium is placed at a predetermined position of the
以上のように、各局の端末装置120が会議サーバ102及び表示サーバ104に接続され、会議システム及び表示システムが構築された後、各局の表示手段128において背景画像が表示されると背景画像に筆記ができる状態となる。続いて、まず親局において筆記がされ、次いで子局において筆記がされる場合を例に表示システム100の動作について説明する。
As described above, after the
まず、親局の手書き入力装置200において、例えば図8に示すように媒体上に文字等が筆記(同図では日程及び担当者の欄に筆記)されると(S190 Yes)、親局の手書き入力装置200は当該筆記内容について筆跡データを生成し(S200)、端末装置120に送信する。そして、親局の端末装置120は、手書き入力装置200から生成された筆跡データを受け付け、当該筆跡データを表示サーバ104に送信する(S210)。
First, in the master station
次に、表示サーバ104は、親局から受信した筆跡データに基づいて、各局の手書き入力装置200に手書きされた筆記内容の履歴を生成する(S220)。表示サーバ104は、各局から受け取った筆跡データに含まれる、当該筆記内容が手書きされたタイムスタンプデータに基づいて、各筆跡データを時系列データにすることにより筆記内容の履歴を生成する。これにより、表示サーバ104において筆跡データを時系列に管理することができ、必要に応じて各局の表示手段128において筆記内容を時系列で順番に再度再現することができる。
Next, the
また、表示システム100が複数種類の背景画像を用いる場合、表示サーバ104は、背景画像ごとに筆記内容の履歴を生成してもよい。すなわち、表示サーバ104は、第1の背景画像に重ねて表示された筆記内容に対応する筆跡データを当該第1の背景画像に対応づけて筆記内容の履歴を生成し、第2の背景画像に重ねて表示された筆記内容に対応する筆跡データを当該第2の背景画像に対応づけて生成する。この場合、各局の端末装置120は、表示手段128において筆記内容が表示されたときに当該表示手段128に表示されている背景画像を示す背景画像識別情報を、筆跡データに付加して表示サーバ104に送信してもよい。この場合、表示サーバ104は、背景画像識別情報に基づいて、背景画像ごとに筆跡データを時系列データにすることにより筆記内容の履歴を生成する。
When the
次に、表示サーバ104は、親局を含む各局に、親局から受信した筆跡データを送信する(S230)。そして、親局を含む各局において端末装置120は、筆跡データに基づいて、図9に示すように背景画像146に重ねて筆記内容を再現する。具体的には、端末装置120は、筆跡データに含まれるペン先の座標値に基づいて表示手段128に表示された背景画像上に筆記内容が再現される位置を定め、属性情報に基づいて再現される筆記内容の属性(点や線等の太さ、色等)を定める。この場合、各端末装置120は、筆跡データに含まれる属性情報とは別に筆記内容が手書きされた局に応じて再現される筆記内容の属性を定めてもよい。例えば、手書き入力がされた端末装置120において当該端末装置120(局)を識別する局識別情報(例えば端末装置120のIPアドレスやMACアドレス)を筆跡データに付加し、各局において当該局識別情報に基づいて筆記内容を再現する。例えば親局の筆記内容については赤色で再現し、子局の筆記内容については青色で再現する等の態様が考えられる。
Next, the
また、筆跡データに含まれる属性データが筆記内容の消去を示すものである場合、ペン先の座標値及び属性情報に基づいて、背景画像に重ねてすでに表示されている筆記内容を消去する。この場合、背景画像に重ねて表示されているすべての筆記内容を消去してもよく、また、所定の局の筆記内容のみを消去するようにしてもよい。 Further, when the attribute data included in the handwriting data indicates erasure of the written content, the written content already displayed over the background image is erased based on the coordinate value of the pen tip and the attribute information. In this case, all the written contents displayed on the background image may be erased, or only the written contents of a predetermined station may be erased.
続いて、会議を継続し(S250 No)、子局の手書き入力装置200において、例えば図10に示すように媒体上に文字等が筆記(同図では責任者のサインが筆記)されると(S190 Yes)、親局の場合と同様に筆記内容について筆跡データを生成する(S200)。そして、親局の場合と同様のステップにより(S210からS230)、各局において端末装置120は、筆跡データに基づいて、図11に示すように背景画像146及び親局において手書きされた筆記内容に重ねて、子局において手書きされた筆記内容を再現する(S240)。これにより、背景画像に再現された所定の筆記内容の上に、複数の局から他の筆記内容を重ね書きすることができる。
Subsequently, the conference is continued (No in S250), and when the
この場合、表示システム100は、親局が承認した場合にのみ子局の手書き入力装置200において筆記された筆記内容を各局の表示手段128において再現するように制限する機能を有してもよい。例えば、親局から子局に、筆記された内容を各局の表示手段128において再現することができる記入権の要求があり、親局が当該要求に対して記入権を付与した場合にのみ、子局の手書き入力装置200において手書きされた筆記内容を各局の表示手段128において再現するよう構成する。例えば、表示サーバ104は子局が記入権を有している場合にのみ当該子局から受信した筆跡データを各局に送信したり、子局が記入権を有している場合にのみ当該子局の端末装置120が表示サーバ104に筆跡データを送信したりするように構成する。
In this case, the
以上、本発明を実施形態を通じて説明したが、上記発明の実施形態を通じて説明された実施例や応用例は、用途に応じて適宜に組み合わせて、又は変更若しくは改良を加えて用いることができ、本発明は上述した実施形態の記載に限定されるものではない。そのような組み合わせ又は変更若しくは改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。 As mentioned above, although this invention was demonstrated through embodiment, the Example and application example which were demonstrated through embodiment of the said invention can be used combining suitably or adding a change or improvement according to a use. The invention is not limited to the description of the above-described embodiment. It is apparent from the description of the scope of claims that the embodiments added with such combinations or changes or improvements can be included in the technical scope of the present invention.
100・・・表示システム
102・・・会議サーバ
104・・・表示サーバ
110・・・通信回線
120・・・端末装置
128・・・表示手段
129・・・ドライブ
134・・・印刷制御手段
140・・・印刷装置
200・・・手書き入力装置
202・・・カメラ
204・・・マイク
206・・・スピーカ
210・・・筐体
220・・・センサボード
222・・・基準マーク
224・・・基準マーク
230・・・ペン
240・・・クリップ
250・・・属性入力手段
270・・・タイムスタンプ生成手段
DESCRIPTION OF
Claims (15)
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段と、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現手段と、
を備えたことを特徴とする端末装置。 Display means for displaying a background image based on the background image data;
Accepting means for receiving handwriting data indicating handwritten content placed on a medium on which the background image is drawn, which is placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. Reproduction means to display the contents,
A terminal device comprising:
前記再現手段は、前記座標データに基づいて、表示された前記背景画像に重ねて前記筆記内容を表示することを特徴とする請求項4に記載の端末装置。 Storage means for storing coordinate data in which coordinates in a print area where the background image is printed on the medium and coordinates in a display area where the background image is displayed by the display means are stored;
The terminal device according to claim 4, wherein the reproduction unit displays the written content on the background image displayed based on the coordinate data.
前記第1の端末装置は、前記背景画像データを前記通信回線を介して前記サーバに送信し、
前記サーバは、前第1の端末装置から受信した前記背景画像データを前記通信回線を介して前記第2の端末装置に送信し、
前記第2の端末装置は、前記サーバから受信した前記背景画像データに基づいて前記背景画像を表示することを特徴とする表示システム。 A first terminal device and a second terminal device, which are the terminal devices according to any one of claims 1 to 7, and the first terminal device and the second terminal device connected via a communication line A server, and
The first terminal device transmits the background image data to the server via the communication line,
The server transmits the background image data received from the previous first terminal device to the second terminal device via the communication line,
The display system, wherein the second terminal device displays the background image based on the background image data received from the server.
前記サーバは、前記第1の筆跡データを少なくとも前記第2の端末装置に送信し、
前記第2の端末装置は、前記第1の筆跡データが示す前記筆記内容を表示することを特徴とする請求項8に記載の表示システム。 The first terminal device transmits first handwriting data, which is the handwriting data received in the first terminal device, to the server,
The server transmits the first handwriting data to at least the second terminal device,
The display system according to claim 8, wherein the second terminal device displays the writing content indicated by the first handwriting data.
前記サーバは、前記第2の筆跡データを少なくとも前記第1の端末装置にさらに送信し、
前記第1の端末装置は、前記第2の筆跡データが示す前記筆記内容をさらに表示することを特徴とする請求項10に記載の表示システム。 The second terminal device transmits second handwriting data, which is the handwriting data received in the second terminal device, to the server,
The server further transmits the second handwriting data to at least the first terminal device,
The display system according to claim 10, wherein the first terminal device further displays the writing content indicated by the second handwriting data.
前記第1の端末装置は、前記背景画像と当該背景画像に重ねて表示された前記筆記内容とを含む合成画像を生成して前記第2の端末装置に送信し、
前記第2の端末装置は、前記合成画像を前記第2の端末装置における前記背景画像として表示することを特徴とする表示システム。 A first terminal device and a second terminal device which are the terminal devices according to any one of claims 1 to 7,
The first terminal device generates a composite image including the background image and the writing content displayed superimposed on the background image, and transmits the composite image to the second terminal device.
The second terminal device displays the composite image as the background image in the second terminal device.
背景画像データに基づいて背景画像を表示する表示手段、
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現手段、
として機能させるためのプログラム。 Computer
Display means for displaying a background image based on the background image data;
Accepting means for receiving handwriting data indicating handwritten content placed on a medium on which the background image is drawn, placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. Reproduction means to display the contents,
Program to function as.
背景画像データに基づいて背景画像を表示する表示手段、
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付手段、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現手段、
として機能させるためのプログラムを格納した記録媒体。 Computer
Display means for displaying a background image based on the background image data;
Accepting means for receiving handwriting data indicating handwritten content placed on a medium on which the background image is drawn, placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. Reproduction means to display the contents,
A recording medium that stores a program for functioning as a computer.
手書き入力装置に載置された、前記背景画像が描かれた媒体上に手書きされた筆記内容を示す筆跡データを受け付ける受付ステップと、
前記筆跡データに基づいて、前記媒体上の背景画像における前記筆記内容の位置と前記表示手段により表示された前記背景画像の位置とが対応するように、表示された前記背景画像に重ねて前記筆記内容を表示する再現ステップと
を備えたことを特徴とする表示方法。 A display step for displaying the background image based on the background image data;
An accepting step of receiving handwriting data indicating handwritten content handwritten on a medium on which the background image is drawn placed on a handwriting input device;
Based on the handwriting data, the writing is superimposed on the displayed background image so that the position of the writing content in the background image on the medium corresponds to the position of the background image displayed by the display means. A display method comprising: a reproduction step for displaying contents.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008267251A JP2009048656A (en) | 2008-10-16 | 2008-10-16 | Terminal device, display system, display method, program, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008267251A JP2009048656A (en) | 2008-10-16 | 2008-10-16 | Terminal device, display system, display method, program, and recording medium |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003171314A Division JP2005010863A (en) | 2003-06-16 | 2003-06-16 | Terminal equipment, display system, display method, program and recording medium |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009048656A true JP2009048656A (en) | 2009-03-05 |
Family
ID=40500743
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008267251A Pending JP2009048656A (en) | 2008-10-16 | 2008-10-16 | Terminal device, display system, display method, program, and recording medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009048656A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011125643A1 (en) * | 2010-03-31 | 2011-10-13 | ブラザー工業株式会社 | Display system and display method |
JP2015102925A (en) * | 2013-11-22 | 2015-06-04 | シャープ株式会社 | Hand-written image display system, hand-written image display method, and hand-written image display program |
JP2019531540A (en) * | 2016-08-16 | 2019-10-31 | マイスクリプト | System and method for collaborative ink management |
JP2020102275A (en) * | 2013-11-19 | 2020-07-02 | 株式会社ワコム | Method for outputting digital ink, device for outputting digital ink, and program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5720884A (en) * | 1980-07-11 | 1982-02-03 | Nippon Atom Ind Group Co Ltd | Hand write input method of electronic computer at atomic power plant |
JPH05207461A (en) * | 1992-01-24 | 1993-08-13 | Mitsubishi Electric Corp | Still picture hand-written conference system |
JPH08171455A (en) * | 1994-12-20 | 1996-07-02 | Tec Corp | Electronic board system |
JP2002027174A (en) * | 2000-07-04 | 2002-01-25 | Toshio Kato | Network idea communication system |
JP2005010863A (en) * | 2003-06-16 | 2005-01-13 | Toho Business Kanri Center:Kk | Terminal equipment, display system, display method, program and recording medium |
-
2008
- 2008-10-16 JP JP2008267251A patent/JP2009048656A/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5720884A (en) * | 1980-07-11 | 1982-02-03 | Nippon Atom Ind Group Co Ltd | Hand write input method of electronic computer at atomic power plant |
JPH05207461A (en) * | 1992-01-24 | 1993-08-13 | Mitsubishi Electric Corp | Still picture hand-written conference system |
JPH08171455A (en) * | 1994-12-20 | 1996-07-02 | Tec Corp | Electronic board system |
JP2002027174A (en) * | 2000-07-04 | 2002-01-25 | Toshio Kato | Network idea communication system |
JP2005010863A (en) * | 2003-06-16 | 2005-01-13 | Toho Business Kanri Center:Kk | Terminal equipment, display system, display method, program and recording medium |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011125643A1 (en) * | 2010-03-31 | 2011-10-13 | ブラザー工業株式会社 | Display system and display method |
JP2020102275A (en) * | 2013-11-19 | 2020-07-02 | 株式会社ワコム | Method for outputting digital ink, device for outputting digital ink, and program |
JP2015102925A (en) * | 2013-11-22 | 2015-06-04 | シャープ株式会社 | Hand-written image display system, hand-written image display method, and hand-written image display program |
JP2019531540A (en) * | 2016-08-16 | 2019-10-31 | マイスクリプト | System and method for collaborative ink management |
US11409952B2 (en) | 2016-08-16 | 2022-08-09 | Myscript | System and method for collaborative ink management |
US11709992B2 (en) | 2016-08-16 | 2023-07-25 | Myscript | System and method for collaborative ink management |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100799644B1 (en) | Terminal device, display system, display method, and recording medium storing program | |
US20200150917A1 (en) | Method and device for sharing content | |
US10572779B2 (en) | Electronic information board apparatus, information processing method, and computer program product | |
US6930673B2 (en) | Collaborative input system | |
US20110047485A1 (en) | Information processing apparatus, conference system and information processing method | |
US20160117142A1 (en) | Multiple-user collaboration with a smart pen system | |
JP2014515512A (en) | Content selection in pen-based computer systems | |
US9420144B2 (en) | Image forming device to provide preview image for editing manuscript image, display apparatus to display and edit the preview image, and methods thereof | |
JP2008217782A (en) | Paper-based meeting service management tool and system | |
US20140152543A1 (en) | System, data providing method and electronic apparatus | |
CN102037476B (en) | Decoupled applications for printed materials | |
CA2929908A1 (en) | System and method of communicating between interactive systems | |
US20190065030A1 (en) | Display apparatus and control method thereof | |
JP2022020703A (en) | Handwriting device and speech and handwriting communication system | |
JP4021249B2 (en) | Information processing apparatus and information processing method | |
JP2009048656A (en) | Terminal device, display system, display method, program, and recording medium | |
CN113495708A (en) | Output device, output system, format information changing method, recording medium, and controller | |
JP4348831B2 (en) | Handwritten input data display system, coordinate data input device, display device, and handwritten input data display device | |
JP7242674B2 (en) | Electronic devices, methods of driving electronic devices, and methods of controlling data recording applications | |
JP2009070007A (en) | Information processor and information processing program | |
JP7388159B2 (en) | Display device, display method | |
US20200272289A1 (en) | Information processing apparatus and non-transitory computer readable medium | |
JP2002023603A (en) | Correction system | |
JP2013084146A (en) | Electronic pen system and program | |
JP2020021199A (en) | Sharing terminal, communication system, presentation method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20090323 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20090323 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100608 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120207 |