JP2008129907A - Information processing system - Google Patents
Information processing system Download PDFInfo
- Publication number
- JP2008129907A JP2008129907A JP2006315256A JP2006315256A JP2008129907A JP 2008129907 A JP2008129907 A JP 2008129907A JP 2006315256 A JP2006315256 A JP 2006315256A JP 2006315256 A JP2006315256 A JP 2006315256A JP 2008129907 A JP2008129907 A JP 2008129907A
- Authority
- JP
- Japan
- Prior art keywords
- input
- attribute
- input device
- display
- processing system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、ディスプレイ等に表示する情報と、タブレットなどの入力装置に手描き入力された入力軌跡とを重畳して表示する際に、手描き入力に対して所定の属性の設定を行って、所望の状態で表示できる情報処理システムに関する。 When superimposing and displaying information displayed on a display or the like and an input trajectory input by handwriting on an input device such as a tablet, the present invention sets a predetermined attribute for the handwriting input, The present invention relates to an information processing system that can be displayed in a state.
ディスプレイ等に表示している情報と、タブレットやタッチパネルを介してその上に書き込んだ情報を関連付けて保存するものが存在している。
また、複数のディスプレイに共通の画像を表示し、遠隔地でも資料を共有するものがある。筆跡の表示を共有できるものもある。これを用いることで、説明箇所を遠隔地の人に伝えることはできる。
There is information stored in association with information displayed on a display or the like and information written thereon via a tablet or a touch panel.
Some display a common image on multiple displays and share materials even in remote locations. Some can share the handwriting display. By using this, the explanation location can be communicated to a remote person.
そして、この種の情報処理システムとしては、以下の特許文献などに提案がなされている。
上記特許文献１は、手書き入力会議システムに関するものであり、１つのウィンドウ上に共有情報と、各個人のプライベートな手書き情報を区別できる形式で表示し、かつ、会議参加者が共有する共有情報と、各個人のプライベートな手書き情報を一括あるいは分割して保存することが可能な手書き入力表示端末装置を用いた手書き入力会議システムである。
The above-mentioned
そして、この手書き入力会議システムでは、複数の相手と同時に通信が可能で、かつ、マルチウィンドウを表示可能な手書き入力表示端末装置を使用する手書き入力会議システムにおいて、各手書き入力表示端末装置が、各個人のプライベートな手書き情報を入力する入力手段と、該入力手段により入力された各個人のプライベートな手書き情報と会議参加者が共有する共有手書き情報とを、同時に同一ウィンドウ内に表示する表示手段とを具備する。また、共有情報は他の任意の入力表示端末装置に転送する。プライベートな情報と共有情報の表示は色、階調で区別する。 And in this handwriting input conference system, in each handwriting input conference system using a handwriting input display terminal device capable of simultaneous communication with a plurality of opponents and capable of displaying a multi-window, each handwriting input display terminal device Input means for inputting personal private handwritten information; and display means for simultaneously displaying private handwritten information of each individual input by the input means and shared handwritten information shared by the conference participants in the same window. It comprises. The shared information is transferred to any other input display terminal device. The display of private information and shared information is distinguished by color and gradation.
この場合、メモを書いた後に、そこから共有情報とする対象を選択するため、メニューが出てきて選択する構成である。したがって、設定方法が煩雑であるという問題がある。
すなわち、メモを書いた後に、そこから共有情報とする対象を選択、メニューが出てきて選択するという設定方法の例が記載されているが、それでは設定方法が大変煩雑である。また、メモを書いた後に共有化の選択をするため、資料を使って内容の説明を行う場合に、他の任意の入力表示端末装置に表示中の資料に対して、説明をしながらリアルタイムで説明している箇所を指し示すということができない。
In this case, after writing a memo, a menu is displayed to select an object to be shared information from there. Therefore, there is a problem that the setting method is complicated.
That is, an example of a setting method is described in which after writing a memo, an object to be shared information is selected and a menu is displayed and selected. However, the setting method is very complicated. In addition, in order to select sharing after writing a memo, when explaining the contents using materials, in real time while explaining the materials displayed on any other input display terminal device It cannot be said that the part being explained is pointed to.
上記特許文献２は、一度入力した筆跡を消去するものである。すなわち、入力者には入力文字の筆跡が分かるようにし、且つ側で見ている第３者には入力事項が認知され難いようにするために、一定時間が経過すると筆跡を消去する技術である。すなわち、書き込んだ情報は全て消去するものであり、書き込み毎に設定することはできない。従って、汎用性が無いという問題がある。
The above-mentioned
上記特許文献３は、ペンによる筆跡を消去することにより、表示部に表示されたデータをも消去する。順に選択して消去の作業を行うか、全て記録するかのどちらかである。順に選択して消去の作業を行う必要がある。このため、設定方法が煩雑であるという問題がある。
In
本発明は、以上のような課題を解決するためになされたものであって、他の表示中の画像などに重畳して入力軌跡の表示を行うことができ、入力軌跡についての保存や消去などの取り扱いの設定を容易に行える情報処理システムを実現することを目的とする。 The present invention has been made in order to solve the above-described problems, and can display an input trajectory by superimposing it on an image being displayed or the like, and save or delete the input trajectory. The purpose is to realize an information processing system that can easily set the handling of the system.
以上の課題を解決する本発明は、以下に記載するようなものである。
（１）請求項１記載の発明は、操作者による手描き入力を受け付けて、該入力軌跡に応じた座標データを生成する入力装置と、表示装置に対する表示用データと前記入力装置からの座標データとを重畳して表示する表示用データを生成する画像処理装置と、を備え、前記入力装置は、前記入力軌跡に関する記憶方法，表示時間，セキュリティ設定，共有条件のいずれかについての属性を設定する属性設定手段を有する、ことを特徴とする情報処理システムである。
The present invention for solving the above problems is as described below.
(1) The invention according to
（２）請求項２記載の発明は、前記属性設定手段は、手描き入力が行われる入力装置もしくは手描き入力と画像表示とが行われる入力装置に設けられている、ことを特徴とする請求項１記載の情報処理システムである。
(2) The invention according to
（３）請求項３記載の発明は、前記属性設定手段は、手描き入力の際における、スタイラスと入力装置との間の距離、入力装置に対するスタイラスの筆圧、入力装置に対するスタイラスの太さ、入力装置に対するスタイラスの種類、入力装置における入力位置、入力装置に対して予め定められた所定形状の画像の入力、入力装置に対して予め定められた所定の接触状態の入力、入力装置に設けられている属性設定操作手段の設定、いずれかに応じて属性の設定が決定される、ことを特徴とする請求項２記載の情報処理システムである。
(3) In the invention according to
（４）請求項４記載の発明は、前記属性設定手段は、手描き入力が行われる入力装置もしくは手描き入力と画像表示とが行われる入力装置に対して使用されるスタイラス側に設けられている属性設定操作手段と、該属性設定操作手段により設定された属性を前記入力装置に対して送信する送信手段とを備え、前記入力装置は、前記送信手段からの属性の設定を受信する受信手段を備える、ことを特徴とする請求項１記載の情報処理システムである。
(4) The invention described in claim 4 is characterized in that the attribute setting means is provided on the stylus side used for an input device for hand-drawn input or an input device for hand-drawn input and image display. A setting operation unit; and a transmission unit configured to transmit the attribute set by the attribute setting operation unit to the input device. The input device includes a reception unit configured to receive an attribute setting from the transmission unit. The information processing system according to
（５）請求項５記載の発明は、前記属性設定手段は、手描き入力がなされた後、続けて入力された第２の入力により属性の設定を行う、ことを特徴とする請求項１乃至請求項４のいずれかに記載の情報処理システムである。 (5) The invention according to claim 5 is characterized in that the attribute setting means sets an attribute by a second input continuously input after handwritten input is made. Item 5. The information processing system according to any one of Item 4.
（６）請求項６記載の発明は、前記属性設定手段は、第１の入力により属性の設定を行い、続けて入力された第２の手描き入力は前記第１の入力により設定された属性に従って扱う、ことを特徴とする請求項１乃至請求項４のいずれかに記載の情報処理システムである。
(6) In the invention according to claim 6, the attribute setting means sets an attribute by a first input, and a second hand-drawn input that is continuously input is in accordance with the attribute set by the first input. The information processing system according to any one of
本発明の情報処理システムによると以下のような効果が得られる。
（１）請求項１記載の発明では、操作者による入力軌跡に応じた座標データを入力装置が生成し、表示装置に対する表示用データと入力装置からの座標データとを重畳して表示可能な表示用の画像データを画像処理装置が生成することで表示を行う際に、前記入力軌跡に関する記憶方法，表示時間，セキュリティ設定，共有条件のいずれかについての属性を入力装置に設けられた属性設定手段により設定する。
According to the information processing system of the present invention, the following effects can be obtained.
(1) In the first aspect of the invention, the input device generates coordinate data corresponding to the input trajectory by the operator, and the display data for display on the display device and the coordinate data from the input device can be displayed in a superimposed manner. Attribute setting means provided in the input device for an attribute of any of the storage method, display time, security setting, and sharing condition related to the input trajectory when the image processing device generates image data for display Set by.
この結果、他の表示中の画像などに重畳して入力軌跡の表示を行うことができ、属性設定手段を用いることで入力軌跡についての保存や消去などの取り扱いの設定を容易に行うことが可能になる。 As a result, it is possible to display the input trajectory by superimposing it on other displayed images, etc., and it is possible to easily set handling such as saving or erasing the input trajectory by using the attribute setting means. become.
（２）請求項２記載の発明では、属性設定手段は、手描き入力が行われる入力装置もしくは手描き入力と画像表示とが行われる入力装置側のいずれかに設けられているため、メニュー方式などと比較して、入力軌跡についての保存や消去などの取り扱いの設定を容易に行うことが可能になる。
(2) In the invention described in
（３）請求項３記載の発明では、手描き入力の際における、スタイラスと入力装置との間の距離、入力装置に対するスタイラスの筆圧、入力装置に対するスタイラスの太さ、入力装置に対するスタイラスの種類、入力装置における入力位置、入力装置に対して予め定められた所定形状の画像の入力、入力装置に対して予め定められた所定の接触状態の入力、入力装置に設けられている属性設定操作手段の設定、いずれかに応じて属性の設定が決定されることにより、メニュー方式などと比較して、直接的に入力操作と連動した状態で、入力軌跡についての保存や消去などの取り扱いの設定を容易に行うことが可能になる。
(3) In the invention described in
（４）請求項４記載の発明では、属性設定手段は、手描き入力が行われる入力装置もしくは手描き入力と画像表示とが行われる入力装置に対して使用されるスタイラス側に設けられている属性設定操作手段と、該属性設定操作手段により設定された属性を入力装置に対して送信する送信手段とを備え、入力装置は、送信手段からの属性の設定を受信する受信手段を備えることにより、メニュー方式などと比較して、直接的に入力操作と連動した状態で、入力軌跡についての保存や消去などの取り扱いの設定を容易に行うことが可能になる。 (4) In the invention according to claim 4, the attribute setting means is an attribute setting provided on the stylus side used for an input device for hand-drawn input or an input device for hand-drawn input and image display. An operation unit; and a transmission unit configured to transmit the attribute set by the attribute setting operation unit to the input device. The input device includes a reception unit configured to receive an attribute setting from the transmission unit. Compared with a method, etc., it is possible to easily set handling such as saving or erasing an input locus in a state directly linked to an input operation.
（５）請求項５記載の発明では、手描き入力がなされた後、続けて入力された第２の入力により属性の設定を行うことにより、メニュー方式などと比較して、直接的に入力操作と連動した状態で、入力軌跡についての保存や消去などの取り扱いの設定を容易に行うことが可能になる。 (5) In the invention according to claim 5, by performing attribute setting by the second input continuously input after hand-drawn input is performed, the input operation can be directly performed as compared with the menu method or the like. In the interlocked state, it is possible to easily set handling such as saving or erasing the input locus.
（６）請求項６記載の発明では、第１の入力により属性の設定を行い、続けて入力された第２の手描き入力は第１の入力により設定された属性に従って扱うことにより、メニュー方式などと比較して、直接的に入力操作と連動した状態で、入力軌跡についての保存や消去などの取り扱いの設定を容易に行うことが可能になる。 (6) In the invention described in claim 6, by setting the attribute by the first input, the second hand-drawn input subsequently input is handled according to the attribute set by the first input, so that the menu method is used. Compared to the above, it is possible to easily set handling such as saving or erasing the input locus in a state directly linked to the input operation.
以下、図面を参照して本発明を実施するための最良の形態（以下、実施形態）を詳細に説明する。
（１）情報処理システムの内容：
（１−１）システム構成：
図１は本発明の第１の実施形態の情報処理システム１００内の詳細構成を示すブロック図である。なお、この図１では、本実施形態の動作説明に必要な部分の周囲を中心に記載してあり、その他の情報処理システム１００として既知の電源スイッチ、電源回路、インタフェースなどの各種の部分については省略してある。
The best mode for carrying out the present invention (hereinafter referred to as an embodiment) will be described below in detail with reference to the drawings.
(1) Contents of information processing system:
(1-1) System configuration:
FIG. 1 is a block diagram showing a detailed configuration in the
本実施形態の情報処理システム１００は、操作者による手描き入力を受け付けて、該入力軌跡に応じた座標データを生成する入力装置１１０と、入力軌跡に関する記憶方法，表示時間，セキュリティ設定，共有条件のいずれかについての属性を設定する属性設定手段としての属性設定部１２０と、表示装置に対する表示用データと入力装置１１０からの座標データとを重畳して表示する表示用データを生成する画像処理装置１３０と、画像処理装置１３０で重畳された表示装置に対する表示用データと入力装置１１０からの座標データとを表示する画像表示装置１４０と、表示用データや座標データを記憶する記憶装置１５０と、前記入力装置１１０に対して操作者が手描き入力を行う入力用ペンとしてのスタイラス１６０と、を有する。
The
ここで、記憶装置１５０は、一時記憶装置１５１と、記憶媒体１５２により構成されている。また、入力装置として、手描き入力の軌跡や入力位置の座標を得るために、ステレオカメラ１８１と座標データ生成部１８２とから構成された入力装置１８０を用いてもよい。
Here, the
なお、図示されないインタフェースを介してネットワークと接続され、他の表示装置に対して表示用データを配布することも可能である。
また、図２（ａ）のように、タブレットなどの入力装置１１０と、液晶ディスプレイなどの画像表示装置１４０とを用いることも可能であるが、図２（ｂ）のように入力装置１１０と画像表示装置１４０とが一体に入力・表示装置１７０として構成されていてもよい。この入力・表示装置１７０としては、入力・表示面１７０ａで、透明タッチパネルによる入力と、透明タッチパネルの下で画像表示を行うこととが、平行して行えるように構成されている。
It is also possible to distribute display data to other display devices connected to a network via an interface (not shown).
In addition, an
また、ネットワークを介して接続された場合、図３に示されるように、入力・表示装置１７０と、複数の画像表示装置１４０とを組み合わせて使用することも可能である。
そして、入力・表示装置１７０に対する表示用データに基づく図４（ａ）の元画像に、入力装置１１０または入力・表示装置１７０からの手描き入力により、図４（ｂ）のように入力軌跡が重畳された状態で表示がなされる。
Further, when connected via a network, as shown in FIG. 3, the input /
4A is superimposed on the original image of FIG. 4A based on the display data for the input /
なお、入力装置１１０としては、タブレットなど以外に、特開２００２−３６６２９４号公報に記載されたような、ステレオカメラを用いたデータ入力装置などを用いて入力軌跡の座標データを生成することも可能である。
As the
（１−２）属性設定：
ここで、属性設定部１２０で設定される属性情報、あるいは、画像処理装置１３０での検出結果、スタイラス１６０に設けられた属性設定部による属性情報、などから設定される属性について、以下に説明する。
(1-2) Attribute setting:
Here, the attribute information set by the
（１−２−１）入力軌跡の記憶方法と入力軌跡の表示時間：
まず、入力軌跡の記憶方法と入力軌跡の表示時間を設定する場合を具体例として説明を行う。
(1-2-1) Input locus storage method and input locus display time:
First, the case where the storage method of the input locus and the display time of the input locus are set will be described as a specific example.
手描き入力による入力軌跡の記憶方法の例として、入力軌跡を元画像と関連付けて、一時記憶装置１５１と記憶媒体１５２の双方に記録するか、一時記憶装置１５１のみに記憶するかの何れかを操作者が選択する。また、表示時間は数値（例えばｍｓｅｃ単位）で操作者が設定する。
As an example of a method for storing an input trajectory by hand-drawn input, an operation is performed in which either the input trajectory is associated with the original image and is recorded in both the
この場合の記憶方法の選択や表示時間の設定の入力方法として、各種の手法が考えられるが、ここでは、入力装置１１０の表面から描画が行われたスタイラス１６０のペン先位置までの距離を計測する方法を例とする。
Various methods are conceivable as input methods for selecting the storage method and setting the display time in this case. Here, the distance from the surface of the
この場合に、まず、接触／非接触を判断する。入力装置１１０の入力面で判断として、接触は入力面で感知し、接触していない場合に非接触と判断する。また、スタイラスのペン先側で判断することも可能である。接触はペン先にかかる圧力で感知し、圧力を感知しない場合に非接触と判断する。そして、入力装置の表面から描画が行われた位置（ペン等の入力ツールの位置）の距離を測り、閾値以下の距離の場合は操作が行われていると認識する。
In this case, first, contact / non-contact is determined. As a determination on the input surface of the
たとえば、スタイラス１６０と入力装置１１０とが接触して、すなわち、距離ｚ＝０の状態で入力軌跡が入力された場合は、入力軌跡を元画像と関連付けて記憶媒体１５２に記録する。また、スタイラス１６０と入力装置１１０とが非接触で、すなわち距離≠０で入力軌跡が入力された場合は、一時記憶装置１５１にのみ記録し、他の記憶媒体１５２に記憶しない、とする。なお、この逆に割り当ててもよい。
For example, when the
また、入力軌跡の表示時間の設定の例としては、スタイラス１６０と入力装置１１０とが接触して、すなわち距離＝０で入力軌跡が入力された場合は元画像に対して常に表示がなされる状態に表示する。また、、スタイラス１６０と入力装置１１０とが非接触で、すなわち距離≠０で入力軌跡が入力された場合は、描画されたペン先の位置から表示面の距離に反比例して表示時間が設定される、とすることが可能である。また、後述するように、入力装置１１０やスタイラス１６０に表示時間の設定部を設けておくことも可能である。
In addition, as an example of setting the display time of the input track, when the
ここでは、スタイラス１６０のペン先から入力面１１１までの距離ｚ（図１０参照）を、各種手法により測定して生成する。
この場合、特開２００４−２７９１１１号公報に記載されているステレオカメラの技術を用いて、入力軌跡の位置や、タブレットの入力面１１１までの距離ｚを測定する。あるいは、スタイラスのペン先から測距のための、超音波や電波などを発信し、入力面からの反射信号の戻り時間で距離を測定する。
Here, the distance z (see FIG. 10) from the pen tip of the
In this case, the position of the input trajectory and the distance z to the input surface 111 of the tablet are measured using the technique of a stereo camera described in Japanese Patent Application Laid-Open No. 2004-279111. Alternatively, ultrasonic waves or radio waves are transmitted from the stylus nib for distance measurement, and the distance is measured by the return time of the reflected signal from the input surface.
また、ここで、図１３（ａ）のように、スタイラス１６０のペン先１６１ａと１６１ｂの太さ（入力軌跡の太さ）が異なる場合、その違いに応じて記録／表示のみを割り当てておき、入力装置１１０で検出されたスタイラス１６０のペン先の太さに応じて、属性設定部１２０が記録／表示のみのいずれかの属性データを生成して画像処理装置１３０に供給する。
Here, as shown in FIG. 13A, when the
この場合、入力装置１１０の入力面で、圧力がかかっている面積を検知するセンサを設け、後述する図１１や図１２でのフローチャートにおける「入力画像記録スイッチ状態取得」において、圧力がかかっている面積が設定値以下なら入力画像記録スイッチをＯＮ、設定値より大きければＯＦＦと設定してもよい。また、圧力と圧力がかかっている面積を検知するセンサはペン先に設けても良い。
In this case, a sensor for detecting the area where pressure is applied is provided on the input surface of the
また、入力装置１１０の入力面に硬さを感知するセンサを設け、「入力画像記録スイッチ状態取得」において、硬さを感知するセンサからの出力値が設定値以下なら、手の入力と判断し、設定値より大きければ手でないと判断してもよい。
In addition, a sensor for detecting hardness is provided on the input surface of the
また、ペン先１６１ａと１６１ｂとから、異なる周波数の電波や超音波が出力されており、これを検知することで、いずれのペン先か、すなわち、記録や表示をどのようにするかを割り当てておいてもよい。
In addition, radio waves and ultrasonic waves with different frequencies are output from the
また、図１３（ｂ）のように、スタイラス１６０に設定スイッチ１６２が設けられており、この設定スイッチ１６２の設定に応じた信号がスタイラス１６０から出力され、図示されない受信部で受信された受信信号に応じて、属性設定部１２０が記録／表示のみのいずれかの属性データを生成して画像処理装置１３０に供給する。
Further, as shown in FIG. 13B, the
また、図１３（ｃ）のように、入力装置１１０または入力・表示装置１７０に設定スイッチ１１２または１７２が設けられており、この設定スイッチ１１２または１７２の設定に応じて属性設定部１２０が記録／表示のみのいずれかの属性データを生成して画像処理装置１３０に供給してもよい。
Further, as shown in FIG. 13C, the setting
また、図１３（ａ）（ｂ）のように、スタイラス１６０の側面などに目盛り付きのスライダが設けられていて、このスライダの操作や設定が、後述するフローチャートにおける設定表示時間の取得の際に用いられてもよい。
Further, as shown in FIGS. 13A and 13B, a slider with a scale is provided on the side surface of the
（１−２−２）セキュリティ設定：
また、属性設定として、表示／記録や表示時間だけでなく、セキュリティレベルの設定によって編集の制限を設けるようにしてもよい。この場合、設定されたセキュリティレベルにより、編集不可、制限つきで編集可能、編集の制限なし、などとすることが可能である。
(1-2-2) Security settings:
Further, as the attribute setting, not only display / recording and display time but also editing restrictions may be provided by setting a security level. In this case, depending on the set security level, editing is impossible, editing is possible with limitations, editing is not limited, and the like.
また、このセキュリティレベルは単独で設定されても良いし、表示時間に反比例して自動的に定まるものであってもよい。この場合、単独設定される場合には、上述した表示時間などの場合と同様に定めればよい。 Further, this security level may be set independently, or may be determined automatically in inverse proportion to the display time. In this case, when it is set independently, it may be determined in the same manner as in the case of the display time described above.
また、このセキュリティの設定に関連して、手描き入力による入力軌跡の共有に関する設定によって、共有についての制限を設けるようにしてもよい。この場合、設定された共有レベルにより、共有不可、制限つきで共有可能、共有の制限なし、などとすることが可能である。 Further, in connection with this security setting, a restriction on sharing may be provided by a setting relating to sharing of an input locus by hand-drawn input. In this case, depending on the set sharing level, sharing is not possible, sharing is possible with limitation, sharing is not limited, and the like.
（１−２−３）変形例：
以上の属性の設定において、入力面での圧力やスイッチなどの設定に加え、以下のような変形も可能である。
(1-2-3) Modification:
In the above attribute setting, in addition to the setting of the pressure and the switch on the input surface, the following modifications are possible.
（１−２−３−１）変形例＃１：
入力装置１１０の入力面に、入力とは別の余白（入力画像の描画を受け付けないエリア）を設けておき、切り替えのスイッチや目盛りを表すグラフィカル・ユーザ・インタフェースを表示し、この部分を操作させるようにしてもよい。
(1-2-3-1) Modification # 1:
On the input surface of the
入力装置１１０の入力面に、入力とは別の余白（入力画像の描画を受け付けないエリア）を設けておき、ここに、書かれた手描き入力の入力軌跡を文字や数字として認識し、この文字や数字を取得して、表示／記録の設定や表示時間の設定としてもよい。
On the input surface of the
（１−２−３−２）変形例＃２：
入力装置１１０の入力面に、入力とは別の余白（入力画像の描画を受け付けないエリア）を設けておき、ここに、書かれた手描き入力の入力軌跡の線（直線や曲線）の長さを認識し、この線の長さを取得して、表示時間の設定としてもよい。
(1-2-3-2) Modification # 2:
A margin (an area not accepting drawing of the input image) different from the input is provided on the input surface of the
（１−２−３−３）変形例＃３：
手描き入力の入力軌跡の入力後、続けて入力された第２の入力を、属性の設定として認識する。
(1-2-3-3) Modification # 3:
After the input locus of the hand-drawn input, the second input continuously input is recognized as the attribute setting.
たとえば、一定時間辺りに圧力がかかった回数（表面をノック（タップ）する回数）を計測する手段を設ける。予め、ノックのパターンと記録するか否かの選択肢を対応付けておき、予め対応付けられたノックのパターンを検知した場合に直前に入力された入力軌跡のＳＷを切り替える。ノックのパターンは入力画像の記録先毎、表示時間等、に対応付けておき、記録の切り替えと同時にそれらを設定しても良い。 For example, a means for measuring the number of times pressure is applied around a certain time (the number of times the surface is knocked (tapped)) is provided. The knock pattern and the option of whether to record are associated in advance, and the SW of the input locus input immediately before is switched when the knock pattern associated in advance is detected. The knock pattern may be associated with each recording destination of the input image, the display time, and the like, and may be set simultaneously with the switching of the recording.
また、予め、ジェスチャと記録するか否かの選択肢を対応付けておき、予め対応付けられたジェスチャが認識された場合に直前に入力された入力軌跡のＳＷを切り替える。ジェスチャは入力画像の記録先毎、表示時間毎、に対応付けておき、記録の切り替えと同時にそれらを設定しても良い。 In addition, a gesture and an option of whether or not to record are associated in advance, and the SW of the input trajectory input immediately before is switched when a previously associated gesture is recognized. The gesture may be associated with each recording destination and display time of the input image, and these may be set simultaneously with the switching of recording.
なお、この場合に、特開２００６−４０２７１号公報に記載された「ソフトウェアアプリケーションと対話するためのジェスチャの認識および使用」に関する技術を適用することが可能である。 In this case, it is possible to apply a technique related to “recognition and use of a gesture for interacting with a software application” described in JP-A-2006-40271.
さらに、予め、図形と記録するか否かの選択肢を対応付けておき、予め対応付けられた記号が描かれた場合に直前に入力された入力軌跡のＳＷを切り替える。
（１−２−３−４）変形例＃４：
手描き入力の入力軌跡の入力直前に、入力された第１の入力を、属性の設定の入力であるとして認識する。
Further, the figure and the option of whether to record are associated with each other in advance, and the SW of the input trajectory input immediately before is switched when a previously associated symbol is drawn.
(1-2-3-4) Modification # 4:
Immediately before the input locus of the handwriting input, the input first input is recognized as an attribute setting input.
この場合、以上の（１−２−３−３）と同様に、ノック、ジェスチャ、図形のパターンを検知した場合、直後に入力された入力軌跡の属性を設定することが可能である。
（２）情報処理システムの基本動作：
以下、図５以降のフローチャートを参照して、本実施形態の動作説明を行う。なお、ここでは、図２（ａ）のようにタブレットと画像表示装置１４０とを用いる場合を具体例にする。
In this case, similarly to the above (1-2-3-3), when a knock, gesture, or figure pattern is detected, it is possible to set the attribute of the input trajectory input immediately after.
(2) Basic operation of information processing system:
Hereinafter, the operation of this embodiment will be described with reference to the flowcharts in FIG. Here, a case where a tablet and the
（２−１）全体動作:
このような場合、まず、表示装置１１０の表示面に、外部の機器から与えられる表示用データに基づく元画像を表示する（図５中のステップＳ５０１）。この場合、外部機器からの表示用データは画像処理装置で画像処理されると共に、記憶装置１５０に記憶されつつ、画像表示装置１４０に対して画像表示がなされる。
(2-1) Overall operation:
In such a case, first, an original image based on display data given from an external device is displayed on the display surface of the display device 110 (step S501 in FIG. 5). In this case, the display data from the external device is subjected to image processing by the image processing device, and also displayed on the
そして、入力装置１１０を介して操作者により手描き入力で画像が描かれると、入力装置１１０から出力される座標データが、属性設定部１２０で設定された属性データと共に画像処理装置１３０に送られる。ここで、画像処理装置１３０は、手描き入力による座標データや属性データが供給されると、イベント発生として（図５中のステップＳ５０２でＹＥＳ）、後述するイベント処理を実行する（図５中のステップＳ５０３）。この場合、後述する入力軌跡の記憶方法に従って記憶装置１５０に軌跡が記憶される。
When an operator draws an image by hand-drawn input via the
そして、画像処理装置１３０において、元画像と共に、手描き入力があればその軌跡を重畳した状態にして、表示用の画像データを画像表示装置１４０に供給して、画像表示を行う（図５中のステップＳ５０４）。
Then, in the
（２−２）イベント処理：
ここで、全体動作に関する図５のステップＳ５０３のイベント処理について、図６のフローチャートを参照して説明する。
(2-2) Event processing:
Here, the event processing in step S503 in FIG. 5 relating to the overall operation will be described with reference to the flowchart in FIG.
手描き入力の入力軌跡の認識は、入力装置１１０を構成するタブレットとスタイラス１６０とによる場合には、タブレットが座標データを生成する。また、入力装置としてステレオカメラ１８１を使用する場合には、ステレオカメラ１８１で得られた撮像信号を元にして、座標データ生成部１８２が手描き入力の入力軌跡の座標データと、スタイラス１６０のペン先から入力面１１１までの距離ｚ（図１０参照）を生成する。この場合、特開２００４−２７９１１１号公報に記載されているステレオカメラの技術を用いて、入力軌跡の位置や、タブレットの入力面１１１までの距離ｚを測定する。
When the input locus of hand-drawn input is recognized by the tablet and the
すなわち、スタイラス１６０と入力装置１１０とが接触した状態で手描き入力が開始されれば、入力装置１１０が座標データを生成する。また、スタイラス１６０と入力装置１１０とが非接触であっても、ステレオカメラ１８１の撮影結果により両者が所定の距離以下であれば、座標データ生成部１８２が座標データを生成する。これらが、手描き入力の開始である。
That is, if handwriting input is started in a state where the
手描き入力が開始されて以上のようにして座標データが生成されると（図６中のステップＳ６０１でＹＥＳ）、入力装置１１０またはスタイラス１６０に設けられている設定手段により、手描き入力の入力軌跡を記録（記録と表示）するか、表示のみにするか、のいずれの設定になっているかを画像処理装置１３０が判定する（図６中のステップＳ６０２）。
When the handwriting input is started and the coordinate data is generated as described above (YES in step S601 in FIG. 6), an input locus of the handwriting input is set by the setting means provided in the
そして、手描き入力の入力軌跡を、元画像の画像データに関連付けてた状態で、入力画像情報（入力軌跡の座標リスト等）として、一時記憶装置１５１に一時的に記憶する（図６中のステップＳ６０３）。すなわち、手描き入力の入力軌跡を、入力画像テーブルなどに新オブジェクトとして追加登録する（図６中のステップＳ６０４）。そして、入力テーブルにおいて、追加されたオブジェクトの位置情報を追加する（図６中のステップＳ６０５）。
Then, the input locus of the handwritten input is temporarily stored in the
（２−３）新オブジェクト追加：
ここで、図６ステップＳ６０４の新オブジェクト追加について、図７のフローチャートを参照し説明する。
(2-3) New object addition:
Here, the addition of a new object in step S604 in FIG. 6 will be described with reference to the flowchart in FIG.
この新オブジェクト追加とは、一連の手描き入力の入力軌跡を１つのオブジェクトとしてオブジェクト番号を付与し、座標データのリスト（座標リスト）、属性として設定された設定表示時間、表示開始時刻などのデータを、図１５のようなテーブル形式で、記憶装置１５０に登録することを意味する。
With this new object addition, an object number is given as an input trajectory of a series of hand-drawn input, and data such as a coordinate data list (coordinate list), set display time set as attributes, display start time, etc. This means that the data is registered in the
すなわち、手描き入力の入力軌跡について、新たな一連の入力があると、その新たな一連の入力について、入力画像テーブルにオブジェクトとして追加する（図７中のステップＳ７０１）。そして、新たに追加されたオブジェクトを現オブジェクトとして（図７中のステップＳ７０２）、属性設定部１２０の設定から表示時間の設定を行い（図７中のステップＳ７０３）、図示されないタイマなどから現時刻を取得し（図７中のステップＳ７０４）、現オブジェクトの表示開始時刻に現時刻を設定する（図７中のステップＳ７０５）。 That is, when there is a new series of inputs for the input locus of handwritten input, the new series of inputs is added as an object to the input image table (step S701 in FIG. 7). Then, the newly added object is set as the current object (step S702 in FIG. 7), the display time is set from the setting of the attribute setting unit 120 (step S703 in FIG. 7), and the current time is determined from a timer (not shown). (Step S704 in FIG. 7), and the current time is set as the display start time of the current object (step S705 in FIG. 7).
ここで、図１３（ａ）（ｂ）のように、スタイラス１６０の側面などにスライダが設けられている場合、このスライダ１６３の設定に応じた信号がスタイラス１６０から出力され、図示されない受信部で受信された受信信号に応じて、属性設定部１２０が表示時間の属性データを生成して画像処理装置１３０に供給する。また、図１３（ｃ）のように、入力装置１１０または入力・表示装置１７０にスライダ１１３または１７３が設けられており、この設定スイッチ１１３または１７３の設定に応じて属性設定部１２０が表示時間の属性データを生成して画像処理装置１３０に供給してもよい。
Here, as shown in FIGS. 13A and 13B, when a slider is provided on the side surface of the
（２−４）入力軌跡表示：
ここで、図５ステップＳ５０４の入力軌跡表示について、図８のフローチャートを参照し説明する。
(2-4) Input locus display:
Here, the input trajectory display in step S504 of FIG. 5 will be described with reference to the flowchart of FIG.
ここで、画像処理装置１３０は、記憶装置１５０内の入力画像テーブルを参照し（図８中のステップＳ８０１）、未参照のオブジェクトが存在するかを調べる（図８中のステップＳ８０２）。未参照のオブジェクトが無ければ（図８中のステップＳ８０２でＮＯ）、処理を終了する。未参照のオブジェクトがあれば（図８中のステップＳ８０２でＹＥＳ）、参照すべきオブジェクトを抽出する（図８中のステップＳ８０３）。
Here, the
そして、設定表示時間と表示監視時刻とを参照し（図８中のステップＳ８０４，Ｓ８０５）、設定表示時間に相当する時間の表示を行う（図８中のステップＳ８０７でＹＥＳ、Ｓ８０９）。すなわち、画像処理装置１３０は、元画像に重畳した状態で、手描き入力の入力軌跡を設定表示時間だけ表示する。
Then, the set display time and the display monitoring time are referred to (steps S804 and S805 in FIG. 8), and the time corresponding to the set display time is displayed (YES in step S807 in FIG. 8, S809). That is, the
また、設定表示時間に相当する時間の表示が完了した場合には（図８中のステップＳ８０７でＮＯ）、そのオブジェクトを入力画像テーブルから削除する（図８中のステップＳ８０８）。 When the display corresponding to the set display time is completed (NO in step S807 in FIG. 8), the object is deleted from the input image table (step S808 in FIG. 8).
（２−５）オブジェクト表示：
ここで、図８ステップＳ８０９のオブジェクトの表示について図９のフローチャートを参照し説明する。
(2-5) Object display:
Here, the display of the object in step S809 in FIG. 8 will be described with reference to the flowchart in FIG.
この場合、１つのオブジェクトは一連の手描き入力の入力軌跡であるため、１つのオブジェクトの座標リストには複数の座標点のデータが存在している。そこで、画像処理装置１３０は、現在参照しているオブジェクトについての座標リストに未表示の座標点が存在するかを調べる（図９中のステップＳ９０１）。未表示の座標点がなければ（図９中のステップＳ９０１でＮＯ）、処理を終了する。
In this case, since one object is an input locus of a series of hand-drawn input, data of a plurality of coordinate points exist in the coordinate list of one object. Therefore, the
未表示の座標点が存在すれば（図９中のステップＳ９０１でＹＥＳ）、その座標点を抽出し（図９中のステップＳ９０２）、画像処理装置１３０は、関連する元画像の座標値を元にして、元画像との関係における表示座標値を算出する（図９中のステップＳ９０３）。そして、その座標点について表示データを生成し、画像表示装置１４０に表示を行う（図９中のステップＳ９０４）。
If there is an undisplayed coordinate point (YES in step S901 in FIG. 9), the coordinate point is extracted (step S902 in FIG. 9), and the
このように、元画像との関係から表示すべき座標を計算することで、元画像をスクロールさせた場合には、手描き入力の入力軌跡も同じようにスクロールする状態となる。
すなわち、元画像データをページの概念がある文書と仮定すると、ページ毎に手描き入力の入力軌跡の座標データをオブジェクト毎に、入力画像テーブルに記録しておく。そして、元画像をスクロールさせる場合は、それに応じて表示面における入力軌跡の位置も変化させる。
In this way, by calculating the coordinates to be displayed from the relationship with the original image, when the original image is scrolled, the input locus of hand-drawn input is similarly scrolled.
That is, assuming that the original image data is a document having the concept of a page, the coordinate data of the input locus of hand-drawn input is recorded for each object in the input image table for each page. When the original image is scrolled, the position of the input locus on the display surface is changed accordingly.
（２−６）元画像更新：
元画像を別の画像に更新する場合、あるいは、複数頁の画像の頁送りをする場合、前述した元画像のスクロールの場合と同様に、元画像にあわせて入力軌跡の表示も更新する。
(2-6) Original image update:
When the original image is updated to another image, or when a multi-page image is paged, the display of the input locus is also updated in accordance with the original image, as in the case of scrolling the original image described above.
（２−７）表示例と記憶内容例：
図１４（ａ）は表示画面の表示例、図１４（ｂ）は一時記憶装置１５１の記憶内容、図１４（ｃ）は記憶媒体１５２の記憶内容を示し、これらの組み合わせが、（１）、（２）、（３）と変化する様子を示している。
(2-7) Display example and stored content example:
14A shows a display example of the display screen, FIG. 14B shows the storage content of the
この場合、「浅き夢見じ酔ひもせず」という元画像の表示に、手描き入力により「必要」という入力軌跡が表示される（図１４（１））。さらに、先ほどの「必要」という入力軌跡の表示に加え、「浅き夢見じ」の元画像の下に手描き入力によりアンダーラインの入力軌跡が表示される（図１４（２））。そして、「浅き夢見じ」の元画像の下の手描き入力によるアンダーラインの入力軌跡と記憶内容が設定時間の経過により消去され、元画像に対して先ほどの「必要」という入力軌跡の表示が残った状態を示している（図１４（３））。 In this case, an input trajectory of “Necessary” is displayed by hand-drawn input on the display of the original image “Shallow Dreamy Drunkenness” (FIG. 14 (1)). Furthermore, in addition to the display of the input trajectory “Necessary”, the underline input trajectory is displayed by hand-drawn input under the original image of “Shallow Yumemiji” (FIG. 14 (2)). Then, the underlined input trajectory and stored contents under the hand-drawn input under the original image of “Shallow Yumemiji” are erased as the set time elapses, and the display of the input trajectory “Necessary” is displayed for the original image. (FIG. 14 (3)).
（３）情報処理システムの詳細動作の具体例：
ここで、図１１と図１２のフローチャートを参照して、本実施形態の一連の詳細動作の具体例について説明を行う。
(3) Specific example of detailed operation of information processing system:
Here, a specific example of a series of detailed operations of the present embodiment will be described with reference to the flowcharts of FIGS. 11 and 12.
（３−１）動作例＃１:
まず、画像処理装置１３０はタブレットなどの接触用の入力装置１１０の入力スイッチの状態を検知する（図１１中のステップＳ１１００）。
(3-1) Operation example # 1:
First, the
入力スイッチがオンであれば（図１１中のステップＳ１１０１でＹＥＳ）、直前までの入力状態を調べ（図１１中のステップＳ１１０２）、直前までの入力状態が非接触でなければ（図１１中のステップＳ１１０２でＮＯ）、接触で入力中と判断し（図１２中のステップＳ１１０３）、接触用の入力装置１１０が生成する座標データ（２次元位置情報）を画像処理装置１３０が取得する（図１１中のステップＳ１１０７）。
If the input switch is on (YES in step S1101 in FIG. 11), the input state until immediately before is checked (step S1102 in FIG. 11). If the input state until immediately before is not non-contact (in FIG. 11). In step S1102, NO is determined, and it is determined that the input is in contact (step S1103 in FIG. 12), and the
また、直前までの入力状態が非接触であれば（図１１中のステップＳ１１０２でＹＥＳ）、接触の開始を入力の開始として扱い（図１２中のステップＳ１１０４）、入力画像記録スイッチがオンであると設定し（図１２中のステップＳ１１０５）、設定表示時間＝ＩＮＦと設定し（図１１中のステップＳ１１０６）、接触用の入力装置１１０が生成する座標データ（２次元位置情報）を画像処理装置１３０が取得する（図１１中のステップＳ１１０７）。
If the input state until immediately before is non-contact (YES in step S1102 in FIG. 11), the start of contact is treated as the start of input (step S1104 in FIG. 12), and the input image recording switch is on. (Step S1105 in FIG. 12), setting display time = INF (step S1106 in FIG. 11), and coordinate data (two-dimensional position information) generated by the
この場合、入力画像記録スイッチとは、入力装置１１０における入力面に所定の操作で手描き入力がなされた場合にオンと判断されるものを意味している。
そして、画像処理装置１３０は、上述した手描き入力の入力軌跡に関するイベント発生の処理を実行し（図１１中のステップＳ１１１７）、状態が入力中であるとして（図１１中のステップＳ１１１８）、スタート（入力スイッチ検出（Ｓ１１００））に戻る。
In this case, the input image recording switch means a switch that is determined to be on when a hand-drawn input is performed on the input surface of the
Then, the
一方、入力スイッチがオンでなければ（図１１中のステップＳ１１０１でＮＯ）、画像処理装置１３０はステレオカメラ１８１を有する入力装置１８０で撮影した結果から３次元位置情報を取得し（図１１中のステップＳ１１０８）、スタイラスのペン先から入力面までの距離ｚが設定値を超えていれば（図１１中のステップＳ１１０９でＮＯ）、非入力中の状態である（図１１中のステップＳ１１１１）としてスタート（入力スイッチ検出（Ｓ１１００））に戻る。
On the other hand, if the input switch is not on (NO in step S1101 in FIG. 11), the
また、スタイラスのペン先から入力面までの距離ｚが設定値内（図１１中のステップＳ１１０９でＹＥＳ）であっても、設定時間内のｚ方向の移動距離が設定値を超えていれば（図１１中のステップＳ１１１０でＮＯ）、非入力中の状態である（図１１中のステップＳ１１１１）としてスタート（入力スイッチ検出（Ｓ１１００））に戻る。 Even if the distance z from the pen tip of the stylus to the input surface is within the set value (YES in step S1109 in FIG. 11), if the moving distance in the z direction within the set time exceeds the set value ( The process returns to the start (input switch detection (S1100)) as a non-input state (step S1111 in FIG. 11).
また、スタイラスのペン先から入力面までの距離ｚが設定値内（図１１中のステップＳ１１０９でＹＥＳ）であって、設定時間内のｚ方向の移動距離が設定値内であって（図１１中のステップＳ１１１０でＹＥＳ）、直前までの入力状態が非入力であれば（図１１中のステップＳ１１１２でＮＯ）、非接触で入力中と判断し（図１２中のステップＳ１１１３）、入力画像記録スイッチがオンであると設定する（図１２中のステップＳ１１１４）。そして、画像処理装置１３０は、上述した手描き入力の入力軌跡に関するイベント発生の処理を実行し（図１１中のステップＳ１１１７）、状態が入力中であるとして（図１１中のステップＳ１１１８）、スタート（入力スイッチ検出（Ｓ１１００））に戻る。
Further, the distance z from the stylus pen tip to the input surface is within the set value (YES in step S1109 in FIG. 11), and the moving distance in the z direction within the set time is within the set value (FIG. 11). If YES in step S1110, if the input state until immediately before is non-input (NO in step S1112 in FIG. 11), it is determined that input is being performed without contact (step S1113 in FIG. 12), and input image recording is performed. It is set that the switch is on (step S1114 in FIG. 12). Then, the
また、スタイラスのペン先から入力面までの距離ｚが設定値内（図１１中のステップＳ１１０９でＹＥＳ）であって、設定時間内のｚ方向の移動距離が設定値内であって（図１１中のステップＳ１１１０でＹＥＳ）、直前までの入力状態が入力中であれば（図１１中のステップＳ１１１２でＹＥＳ）、非接触で入力を開始し（図１２中のステップＳ１１１５）、距離ｚに応じて設定表示時間を取得する（図１２中のステップＳ１１１６）。そして、画像処理装置１３０は、上述した手描き入力の入力軌跡に関するイベント発生の処理を実行し（図１１中のステップＳ１１１７）、状態が入力中であるとして（図１１中のステップＳ１１１８）、スタート（入力スイッチ検出（Ｓ１１００））に戻る。
Further, the distance z from the stylus pen tip to the input surface is within the set value (YES in step S1109 in FIG. 11), and the moving distance in the z direction within the set time is within the set value (FIG. 11). If YES in step S1110 in the middle) and the input state until immediately before is being input (YES in step S1112 in FIG. 11), the input is started without contact (step S1115 in FIG. 12), and according to the distance z. The setting display time is acquired (step S1116 in FIG. 12). Then, the
（３−２）動作例＃２:
まず、画像処理装置１３０はタブレットなどの接触用の入力装置１１０の入力スイッチの状態を検知する（図１２中のステップＳ１２００）。入力スイッチがオンでなければ（図１２中のステップＳ１２０１でＮＯ）、非入力中の状態である（図１２中のステップＳ１２１１）としてスタート（入力スイッチ検出（Ｓ１２００））に戻る。
(3-2) Operation example # 2:
First, the
また、画像処理装置１３０は入力装置１１０の入力スイッチの状態を検知（図１２中のステップＳ１２００）して、入力スイッチがオンであれば（図１２中のステップＳ１２０１でＹＥＳ）、直前までの入力状態を調べ（図１２中のステップＳ１２０２）、直前までの入力状態が非入力であれば（図１２中のステップＳ１２０２でＹＥＳ）、入力開始と判断し（図１２中のステップＳ１２０４）、入力画像記録スイッチの状態を取得し（図１２中のステップＳ１２０５）、設定表示時間を取得する（図１２中のステップＳ１２０６）。また、直前までの入力状態が非入力でなければ（図１２中のステップＳ１２０２でＮＯ）、入力中と判断する（図１２中のステップＳ１２０３）。
Further, the
なお、入力画像記録スイッチとは、操作部を備えたスイッチでも良いし、入力装置１１０における所定の手描き入力がなされた場合にオンと判断されるものであってもよい。
そして、接触用の入力装置１１０が生成する座標データ（２次元位置情報）を画像処理装置１３０が取得する（図１２中のステップＳ１２０７）。
Note that the input image recording switch may be a switch having an operation unit, or may be determined to be turned on when a predetermined hand-drawn input is made on the
Then, the
さらに、画像処理装置１３０は、上述した手描き入力の入力軌跡に関するイベント発生の処理を実行し（図１２中のステップＳ１２０８）、状態が入力中であるとして（図１２中のステップＳ１２０９）、スタート（入力スイッチ検出（Ｓ１２００））に戻る。
Further, the
（４）実施形態により得られる効果：
以上の実施形態の情報処理システムによれば、入力装置１１０での入力軌跡に関する属性を設定する属性設定部１２０をもつため、入力軌跡そのものだけでなく属性を設定することによって、入力軌跡を汎用的に利用することができる。
(4) Effects obtained by the embodiment:
According to the information processing system of the above embodiment, since the
以上の実施形態によれば、入力装置や入力手法を分けることなく同じ筆記（手描き入力）行為で複数の処理ができる。例えば、入力軌跡をコマンドの指示に使う場合とメモとして記録する場合などが可能であり、操作性がよい。 According to the above embodiment, a plurality of processes can be performed with the same writing (hand-drawn input) action without dividing the input device and the input method. For example, it is possible to use the input trajectory for command instructions or to record it as a memo, and the operability is good.
以上の実施形態によれば、入力軌跡に関する属性として入力軌跡の表示時間を設定できるため、一時的に表示して欲しい情報と元画像の表示にあわせて常に表示したい情報が混在する場合に、同じ入力装置や入力手法で複数の使い方ができる。例えば、説明をしながらリアルタイムで説明箇所を指し示すこととメモとして記録することがある場合などが可能になる。 According to the above embodiment, the display time of the input trajectory can be set as an attribute related to the input trajectory. Therefore, when the information that the user wants to display temporarily and the information that is always displayed in accordance with the display of the original image are mixed, the same Multiple uses are possible with input devices and input methods. For example, it is possible to point to an explanation location in real time while recording and to record as a memo.
以上の実施形態によれば、入力軌跡に関する属性として、入力軌跡のセキュリティ情報を設定できるため、同じ入力装置や入力手法で複数のセキュリティレベルの情報を入力できる。書き込みをする情報の中に、他人に編集されたくない情報と、自由に編集しても構わない情報が混在する場合などが可能になる。 According to the above embodiment, since the security information of the input trajectory can be set as the attribute related to the input trajectory, information of a plurality of security levels can be input with the same input device and input method. The information to be written can be mixed with information that is not desired to be edited by others and information that may be freely edited.
以上の実施形態によれば、入力軌跡に関する属性として、入力軌跡の共有方法を設定できるため、同じ入力装置や入力手法で他人に公開したい情報と個人的な情報の両方を入力できる。例えば、説明をしながらリアルタイムで説明箇所を指し示すことと個人的なメモとして記録することがある場合などが可能になる。 According to the above embodiment, since an input locus sharing method can be set as an attribute related to an input locus, both information desired to be disclosed to others and personal information can be input using the same input device and input method. For example, it is possible to point to an explanation location in real time while recording and to record as a personal memo.
以上の実施形態によれば、属性設定部１２０は、入力装置１１０の表面から描画が行われた位置の距離を計測する手段を有し、その距離に応じて属性を設定するため、特別な入力装置や入力手法を使わずに同じ描画という動作で入力軌跡以外の情報を設定できる。特に、説明をしながらリアルタイムで説明箇所を指し示すことと、細かい文字などでメモすることがある場合、前者は太い入力軌跡、後者は細い入力軌跡が適している。
According to the above embodiment, the
以上の実施形態によれば、属性設定部１２０は、描画が人間の手によって行われたのかを判断する手段を有し、その判断結果に応じて属性を設定することができるため、手とペン等の特別な入力装置や入力手法を用いることで入力軌跡以外の情報を設定できる。特に、説明をしながらリアルタイムで説明箇所を指し示すことと、細かい文字などでメモすることがある場合、前者は手を用いて大まかな位置を示すこと、後者は詳細な情報を入力するのに適している。
According to the above embodiment, the
以上の実施形態によれば、属性設定部１２０は、描画がペンの一方の端と他方の端のどちらかによって行われたのかを判断する手段を有し、その判断結果に応じて属性を設定するため、同じペンを使うことで、入力軌跡以外の情報を設定できる。特に、説明をしながらリアルタイムで説明箇所を指し示すこととメモとして記録する２つのモードが必要な場合に、モード切り替えが容易になる。
According to the above embodiment, the
以上の実施形態によれば、属性設定部１２０は、スタイラス１６０側に設けられた属性入力手段であり、前記属性入力手段の状態に応じて属性を設定するため、描画に用いるペンを使って入力軌跡以外の情報を設定できる。描画しながら設定を変更することも容易になるというメリットがある。
According to the above embodiment, the
以上の実施形態によれば、属性設定部１２０は、入力装置１１０や画像表示装置１４０や入力・表示装置１７０に設けられた属性入力手段であり、前記属性入力手段の状態に応じて属性を設定するため、描画を手で行いたい場合でも、入力軌跡以外の情報を設定できる。表示側で設定が可能であるので、入力軌跡の入力者毎に設定を変える等も可能になる。
According to the above embodiment, the
以上の実施形態によれば、属性設定部１２０は、入力軌跡入力後、続けて入力された第２の入力を認識する手段を有し、その入力結果に応じて属性を設定するため、描画以外の特別な動作なしで、既に入力した入力軌跡の状態を変更できる。
According to the above embodiment, the
以上の実施形態によれば、属性設定部１２０は、入力された第１の入力を認識する手段を有し、その入力結果に応じて続けて入力された入力軌跡の属性を設定するため、描画以外の特別な動作なしで、入力軌跡の状態を変更できる。描画する前に表示装置に表示しない等の設定ができるので、セキュリティ確保に役立つ。
According to the above embodiment, the
以上の実施形態によれば、入力結果として、筆記時の距離、入力軌跡の形状、色、圧力、入力手段(ペン、指など）に応じて属性を設定するため、描画動作の中で、入力軌跡の状態を変更できる。特に、描画する前に表示装置に表示しない等の設定ができ、その設定自体も他人に気づかれずに行うことができるので、パスワードの入力などに有効であるというメリットがある。 According to the above embodiment, as the input result, the attribute is set according to the distance at the time of writing, the shape of the input locus, the color, the pressure, and the input means (pen, finger, etc.). The state of the trajectory can be changed. In particular, there is a merit that it is effective for inputting a password and the like because it can be set such that it is not displayed on the display device before drawing and the setting itself can be performed without being noticed by others.
なお、以上の実施形態では、画像処理装置１３０が各種処理を実行していたが、ＣＰＵやプロセッサなどが画像処理プログラムによって画像処理と各種処理とを実行するような構成であってもよい。
In the above embodiment, the
１００ 情報処理システム
１１０ 入力装置
１２０ 属性設定部
１３０ 画像処理装置
１４０ 画像表示装置
１５０ 記憶装置
１６０ スタイラス（入力用のペン）
１７０ 入力・表示装置
１８０ 入力装置（ステレオカメラを用いた入力装置）
１８１ ステレオカメラ
１８２ 座標データ生成部
100
170 Input / Display Device 180 Input Device (Input Device Using Stereo Camera)
181
Claims (6)
表示装置に対する表示用データと前記入力装置からの座標データとを重畳して表示する表示用データを生成する画像処理装置と、
を備え、
前記入力装置は、前記入力軌跡に関する記憶方法，表示時間，セキュリティ設定，共有条件のいずれかについての属性を設定する属性設定手段を有する、
ことを特徴とする情報処理システム。 An input device that accepts hand-drawn input by an operator and generates coordinate data according to the input locus;
An image processing device for generating display data to be displayed by superimposing display data for the display device and coordinate data from the input device;
With
The input device has attribute setting means for setting an attribute for any of a storage method, display time, security setting, and sharing condition related to the input locus,
An information processing system characterized by this.
ことを特徴とする請求項１記載の情報処理システム。 The attribute setting means is provided in an input device for performing hand-drawn input or an input device for performing hand-drawn input and image display.
The information processing system according to claim 1.
ことを特徴とする請求項２記載の情報処理システム。 The attribute setting means includes a distance between the stylus and the input device, handwriting input, stylus writing pressure with respect to the input device, stylus thickness with respect to the input device, stylus type with respect to the input device, and input position on the input device. , Input of an image of a predetermined shape to the input device, input of a predetermined contact state to the input device, setting of attribute setting operation means provided in the input device The attribute settings are determined accordingly.
The information processing system according to claim 2.
前記入力装置は、前記送信手段からの属性の設定を受信する受信手段を備える、
ことを特徴とする請求項１記載の情報処理システム。 The attribute setting means includes an attribute setting operation means provided on a stylus side used for an input device for performing hand-drawn input or an input device for performing hand-drawn input and image display, and the attribute setting operation means. Transmission means for transmitting the set attribute to the input device,
The input device includes receiving means for receiving attribute settings from the transmitting means.
The information processing system according to claim 1.
ことを特徴とする請求項１乃至請求項４のいずれかに記載の情報処理システム。 The attribute setting means sets the attribute by the second input continuously input after handwritten input is made.
The information processing system according to claim 1, wherein the information processing system is an information processing system.
手描き入力は前記第１の入力により設定された属性に従って扱う、
ことを特徴とする請求項１乃至請求項４のいずれかに記載の情報処理システム。 The attribute setting means sets an attribute by a first input, and a second hand-drawn input that is subsequently input is handled according to the attribute set by the first input.
The information processing system according to claim 1, wherein the information processing system is an information processing system.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006315256A JP2008129907A (en) | 2006-11-22 | 2006-11-22 | Information processing system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006315256A JP2008129907A (en) | 2006-11-22 | 2006-11-22 | Information processing system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2008129907A true JP2008129907A (en) | 2008-06-05 |
Family
ID=39555646
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006315256A Pending JP2008129907A (en) | 2006-11-22 | 2006-11-22 | Information processing system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2008129907A (en) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013127702A (en) * | 2011-12-19 | 2013-06-27 | Ricoh Co Ltd | Display device, display method, and program |
| JP2013235416A (en) * | 2012-05-09 | 2013-11-21 | Seiko Epson Corp | Image display system |
| JP2013250654A (en) * | 2012-05-30 | 2013-12-12 | Oki Electric Ind Co Ltd | Information processing device, operator identification system, method, and program |
| JP2016035664A (en) * | 2014-08-04 | 2016-03-17 | シャープ株式会社 | Input display device |
| JP6373537B1 (en) * | 2017-09-04 | 2018-08-15 | 株式会社ワコム | Spatial position indication system |
| WO2019044003A1 (en) * | 2017-09-04 | 2019-03-07 | 株式会社ワコム | Spatial position indication system |
| WO2019171719A1 (en) * | 2018-03-05 | 2019-09-12 | 株式会社ワコム | Input device employing electronic pen |
| US11460955B2 (en) | 2019-08-07 | 2022-10-04 | Seiko Epson Corporation | Projection system, position detection system, and method for controlling position detection system |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6459421A (en) * | 1987-08-31 | 1989-03-07 | Canon Kk | Information input/output device |
| JPH0410994A (en) * | 1990-04-27 | 1992-01-16 | Hitachi Ltd | Ready blackboard apparatus |
| JPH07105105A (en) * | 1993-09-30 | 1995-04-21 | Hitachi Software Eng Co Ltd | Handwriting input conference system |
| JP2000003252A (en) * | 1999-04-26 | 2000-01-07 | Fujitsu Ltd | Pen input information processor |
| JP2006024039A (en) * | 2004-07-08 | 2006-01-26 | Sony Corp | Information processor and program to be used for the same |
| JP2006134105A (en) * | 2004-11-05 | 2006-05-25 | Toshiba Corp | Device for reading form |
-
2006
- 2006-11-22 JP JP2006315256A patent/JP2008129907A/en active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6459421A (en) * | 1987-08-31 | 1989-03-07 | Canon Kk | Information input/output device |
| JPH0410994A (en) * | 1990-04-27 | 1992-01-16 | Hitachi Ltd | Ready blackboard apparatus |
| JPH07105105A (en) * | 1993-09-30 | 1995-04-21 | Hitachi Software Eng Co Ltd | Handwriting input conference system |
| JP2000003252A (en) * | 1999-04-26 | 2000-01-07 | Fujitsu Ltd | Pen input information processor |
| JP2006024039A (en) * | 2004-07-08 | 2006-01-26 | Sony Corp | Information processor and program to be used for the same |
| JP2006134105A (en) * | 2004-11-05 | 2006-05-25 | Toshiba Corp | Device for reading form |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013127702A (en) * | 2011-12-19 | 2013-06-27 | Ricoh Co Ltd | Display device, display method, and program |
| JP2013235416A (en) * | 2012-05-09 | 2013-11-21 | Seiko Epson Corp | Image display system |
| JP2013250654A (en) * | 2012-05-30 | 2013-12-12 | Oki Electric Ind Co Ltd | Information processing device, operator identification system, method, and program |
| JP2016035664A (en) * | 2014-08-04 | 2016-03-17 | シャープ株式会社 | Input display device |
| CN111033452A (en) * | 2017-09-04 | 2020-04-17 | 株式会社和冠 | Spatial position indication system |
| US11630570B2 (en) | 2017-09-04 | 2023-04-18 | Wacom Co., Ltd. | Spatial position indication system |
| JP2019046458A (en) * | 2017-09-04 | 2019-03-22 | 株式会社ワコム | Spatial position instruction system |
| CN111033452B (en) * | 2017-09-04 | 2024-04-09 | 株式会社和冠 | Spatial position indication system |
| JP6373537B1 (en) * | 2017-09-04 | 2018-08-15 | 株式会社ワコム | Spatial position indication system |
| US20200201542A1 (en) * | 2017-09-04 | 2020-06-25 | Wacom Co., Ltd. | Spatial position indication system |
| JP7441600B2 (en) | 2017-09-04 | 2024-03-01 | 株式会社ワコム | spatial positioning system |
| WO2019044003A1 (en) * | 2017-09-04 | 2019-03-07 | 株式会社ワコム | Spatial position indication system |
| US11243616B2 (en) | 2018-03-05 | 2022-02-08 | Wacom Co., Ltd. | Input device |
| JPWO2019171719A1 (en) * | 2018-03-05 | 2021-03-04 | 株式会社ワコム | Input device and input method |
| US11656692B2 (en) | 2018-03-05 | 2023-05-23 | Wacom Co., Ltd. | Input device |
| JP7386152B2 (en) | 2018-03-05 | 2023-11-24 | 株式会社ワコム | Input system and input method |
| CN111819524A (en) * | 2018-03-05 | 2020-10-23 | 株式会社和冠 | Input device using electronic pen |
| WO2019171719A1 (en) * | 2018-03-05 | 2019-09-12 | 株式会社ワコム | Input device employing electronic pen |
| US11460955B2 (en) | 2019-08-07 | 2022-10-04 | Seiko Epson Corporation | Projection system, position detection system, and method for controlling position detection system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2008129907A (en) | Information processing system | |
| US11003304B2 (en) | Information display terminal, information display method and program | |
| US10216945B2 (en) | Digital touch screen device and method of using the same | |
| US8487879B2 (en) | Systems and methods for interacting with a computer through handwriting to a screen | |
| US20160154482A1 (en) | Content Selection in a Pen-Based Computing System | |
| WO2013018480A1 (en) | User interface device comprising touch pad for shrinking and displaying source image within screen capable of touch input, input processing method and program | |
| US20130019158A1 (en) | Information processing apparatus, information processing method, and storage medium | |
| CN104298398A (en) | Display input device | |
| CN107850978A (en) | For providing the apparatus and method of hand-written support in documents editing | |
| CN102239470A (en) | Display and input device | |
| JP2017524186A (en) | Detection of digital ink selection | |
| JP2009129352A (en) | Display system, display device and program | |
| JP4177335B2 (en) | Handwritten character input device and handwritten character input processing method | |
| JP2011100253A (en) | Drawing device | |
| JPH06131436A (en) | Method and device for plotting processing | |
| US10318047B2 (en) | User interface for electronic device, input processing method, and electronic device | |
| EP2712433B1 (en) | User interface for drawing with electronic devices | |
| JPS5935277A (en) | Controlling method by real-time recognition of handwritten character pattern | |
| KR100899035B1 (en) | Electronic board system which use a plural number of display panel and use method | |
| CN1618056A (en) | Method of providing a display for a graphical user interface | |
| JPH06175776A (en) | Presentation device | |
| JP2002278703A (en) | Information input device and electronic blackboard system | |
| JP2019139819A (en) | Image processing device and image processing method | |
| JP3653789B2 (en) | Writing or drawing device | |
| JP2019148918A (en) | Input display device and input display method and input display program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20091110 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110615 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110628 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111025 |