JP2016024504A - Written content processing system, information processor, program, reading device and notebook - Google Patents
Written content processing system, information processor, program, reading device and notebook Download PDFInfo
- Publication number
- JP2016024504A JP2016024504A JP2014146193A JP2014146193A JP2016024504A JP 2016024504 A JP2016024504 A JP 2016024504A JP 2014146193 A JP2014146193 A JP 2014146193A JP 2014146193 A JP2014146193 A JP 2014146193A JP 2016024504 A JP2016024504 A JP 2016024504A
- Authority
- JP
- Japan
- Prior art keywords
- information
- writing
- handwriting
- processing
- identifier
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 177
- 230000010365 information processing Effects 0.000 claims abstract description 107
- 238000000034 method Methods 0.000 claims description 215
- 230000008569 process Effects 0.000 claims description 200
- 238000001514 detection method Methods 0.000 claims description 12
- 230000005540 biological transmission Effects 0.000 description 23
- 238000004891 communication Methods 0.000 description 23
- 230000006870 function Effects 0.000 description 9
- 238000012015 optical character recognition Methods 0.000 description 8
- 230000005674 electromagnetic induction Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 239000003990 capacitor Substances 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical group [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 238000010923 batch production Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000003100 immobilizing effect Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、ユーザが筆記した内容をディジタルデータ化して利用するための筆記内容処理システムに関する。 The present invention relates to a written content processing system for converting and using digital data written by a user.
ユーザが筆記具を用いて筆記した筆跡をディジタルデータ化することのできる読取装置(筆記入力装置)が既知である(例えば、下記特許文献を参照)。 There is known a reading device (writing input device) that can convert a handwriting written by a user using a writing instrument into digital data (see, for example, the following patent document).
この種の読取装置では、筆記される媒体である筆記用シート(特に、用紙)が電磁誘導式デジタイザ上に載置される。この状態で、ユーザが筆記具(電磁ペン)を用いて筆記用シートに所望の内容の筆記を行うと、デジタイザ内の検出回路により筆記具の筆先の位置が検出され、その位置座標の時系列から、筆記用シートに筆記された内容を示す筆跡情報が生成される。ユーザによる筆記が終了すると、筆記内容に対応した筆跡情報が、通信インタフェースを介してパーソナルコンピュータ等の外部の情報処理装置に送信され、保存される。 In this type of reading apparatus, a writing sheet (particularly, paper) as a medium for writing is placed on an electromagnetic induction digitizer. In this state, when the user writes the desired content on the writing sheet using the writing tool (electromagnetic pen), the position of the writing tool's writing tip is detected by the detection circuit in the digitizer, and from the time series of the position coordinates, Handwriting information indicating the content written on the writing sheet is generated. When the writing by the user is completed, handwriting information corresponding to the written content is transmitted to an external information processing apparatus such as a personal computer via the communication interface and stored.
筆記用シートに筆記した内容に係る筆跡情報をどのように処理したいかは、ユーザによって様々であると考えられる。あるユーザは、その筆跡情報を特定の情報処理装置に保存して蓄積しておくことを希望するであろう。別のユーザは、その筆跡情報を他者と共有するために、特定の一または複数のメールアドレスを宛先として電子メールの形で送信することを希望するであろう。 It is considered that there are various ways of processing the handwriting information related to the content written on the writing sheet. A user may wish to store and store the handwriting information in a specific information processing apparatus. Another user may wish to send in the form of an e-mail addressed to a specific mail address or addresses in order to share the handwriting information with others.
また、同一のユーザであっても、その時々に応じて筆跡情報の処理方法を変更することがあり得る。筆跡情報が会議の議事録であれば、これを会議の参加メンバー(または、参加しなかったメンバー)に向けて送信するが、個人的なメモであれば、専ら私的な記憶領域に保存するのみとするかもしれない。 Moreover, even if it is the same user, the processing method of handwriting information may be changed according to the occasion. If the handwriting information is the minutes of the meeting, it is sent to the meeting participants (or the members who did not participate), but if it is a personal note, it is stored exclusively in a private storage area. Maybe only.
本発明は、筆記用シートに筆記された筆跡をディジタルデータ化して得られる筆跡情報の自動処理を可能とするとともに、その処理の態様をユーザが任意に設定でき、かつその時々に応じて容易に処理の態様を選択できるようにすることを所期の目的としている。 The present invention enables automatic processing of handwriting information obtained by converting handwriting written on a writing sheet into digital data, and allows the user to arbitrarily set the processing mode and easily according to the occasion. The intended purpose is to be able to select the processing mode.
上述の課題を解決するために、本発明では、図1に示すように、複数枚の筆記用シートを有する筆記帳とともに用いられるものであって、前記筆記用シート上に筆記された内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子であり前記処理を実行させるために前記筆記用シートに記入される処理識別子との組である、任意に設定される設定情報の入力を受け付ける設定情報受付部101と、前記設定情報受付部101で受け付けた設定情報を記憶する設定情報記憶部102と、前記筆記用シートに筆記された筆跡を筆跡情報として取得する筆跡情報取得部103と、前記筆記用シートに記入された処理識別子を取得する処理識別子取得部104と、前記設定情報記憶部102が記憶している設定情報を参照し、前記処理識別子取得部104で取得した処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆跡情報取得部103で取得した筆跡情報に対して実行する筆跡情報処理部とを具備する筆記内容処理システム1を構成した。
In order to solve the above-described problem, in the present invention, as shown in FIG. 1, the present invention is used together with a writing book having a plurality of writing sheets, and shows the contents written on the writing sheet. A combination of a process definition that defines one or more processes to be performed on handwriting information and an identifier that identifies the process definition and is entered in the writing sheet in order to execute the process A setting
ここで、「筆記帳」とは、例えば用紙が複数枚重ね合わされたノート、レポートパッド、メモ帳等である。そして、「筆記用シート」とは、ノートであればその各ページ(中紙)、レポートパッドであれば綴じられたレポート用紙の一枚一枚、メモ帳であれば綴じられたメモ用紙の一枚一枚がそれに該当する。無論、筆記用シートの素材は紙には限定されない。 Here, the “writing book” is, for example, a notebook, a report pad, a memo pad, or the like on which a plurality of sheets are stacked. “Writing sheet” means each page (inner paper) if it is a notebook, one sheet of report paper bound if it is a report pad, one piece of note paper bound if it is a notepad One piece corresponds to it. Of course, the material of the writing sheet is not limited to paper.
また、「任意に設定される設定情報の入力を受け付ける」とは、ユーザによる設定情報の手入力を何らかの操作入力デバイス(例えば、タッチパネル、トラックパッド若しくはペンタブレット、マウスといったポインティングデバイスや、キーボート、押下ボタン等)を介して受け付けること、ユーザによる音声での指示をマイクを介して受け付けること、ユーザが使用する情報処理装置から送信される設定情報を受信すること、ユーザの手により所定の記憶装置若しくは記録媒体に保存された設定情報を読み出すこと、または、ユーザの手により用紙類に記載された設定情報をイメージセンサ(例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等)を介して光学的に読み取ることをいう。 In addition, “accepting input of setting information that is arbitrarily set” means that a user manually inputs setting information such as a pointing device such as a touch panel, a trackpad or a pen tablet, a mouse, a keyboard, a press Button, etc., receiving voice instructions from the user via a microphone, receiving setting information transmitted from an information processing device used by the user, a predetermined storage device or The setting information stored in the recording medium is read out, or the setting information written on the paper by the user's hand is read by an image sensor (for example, a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS). optically read through the electronic device).
前記処理識別子が、前記筆記帳を構成する各筆記用シート毎に記入されるものであり、前記筆跡情報処理部105が、ある筆記用シートに記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、同一の筆記用シートに筆記された内容を示す筆跡情報に対して実行するものとすれば、筆記帳の各ページ毎に、当該ページに筆記された内容に係る筆跡情報に対する処理を簡便に指定することが可能となる。
The processing identifier is entered for each writing sheet constituting the writing book, and the handwriting
さらに、前記処理識別子とは別に前記筆記用シートに記入される、前記処理の実行を開始する旨の意思を示す開始符号を検出する開始符号検出部106を具備し、前記筆跡情報処理部105が、前記筆記用シートに前記開始符号が記入されたことを前記開始符号検出部106が検出したことを条件として、前記処理識別子と組となっている処理定義によって定義されている一または複数の処理を前記筆跡情報に対して実行するものとすれば、ユーザが筆跡情報を処理するタイミングを任意に制御できるようになる。即ち、ユーザが筆記用シートに必要十分な筆記を行った時点で、その筆記内容に対する所望の処理の実行を開始することができる。加えて、その処理の実行後に当該筆記用シートに追記した内容は処理対象としないようにすることも可能である。
In addition, the handwriting
より具体的には、前記設定情報の処理定義に、前記筆跡情報に対する処理の内容を規定するものとして、筆跡情報に付加するメタ情報の指定、筆跡情報の保存先の指定、筆跡情報の電子メールによる送信の宛先アドレスの指定、筆跡情報のアップロード先の指定、のうち少なくとも一つが含まれ、前記筆跡情報処理部105が、前記設定情報に基づき、処理定義により指定されたメタ情報を前記筆跡情報に付加、処理定義により指定された保存先に前記筆跡情報を保存、処理定義により指定された宛先アドレスに向けて前記筆跡情報を電子メールとして送信、処理定義により指定された宛先に向けて前記筆跡情報をアップロード、のうち少なくとも一つの処理を実行する。
More specifically, in the process definition of the setting information, the content of the process for the handwriting information is specified, designation of meta information to be added to the handwriting information, designation of the storage destination of the handwriting information, handwriting information e-mail At least one of the designation of the transmission destination address and the designation of the upload destination of the handwriting information is included, and the handwriting
本筆記内容処理システム1を構成するために好適な情報処理装置は、前記筆記用シート上に筆記された内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子であり前記処理を実行させるために前記筆記用シートに記入される処理識別子との組である、任意に設定される設定情報の入力を受け付ける設定情報受付部101と、前記設定情報受付部101で受け付けた設定情報を記憶する設定情報記憶部102と、前記設定情報記憶部102が記憶している設定情報を参照し、前記筆記用シートに記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆記用シートに筆記された内容を示す筆跡情報に対して実行する筆跡情報処理部105とを具備する。
An information processing apparatus suitable for configuring the writing content processing system 1 includes a processing definition that defines one or a plurality of processings to be executed on handwriting information indicating the content written on the writing sheet, and the processing definition A setting
本筆記内容処理システム1を構成するために好適なプログラムは、筆記用シート上に筆記された内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子であり前記処理を実行させるために前記筆記用シートに記入される処理識別子との組である、任意に設定される設定情報の入力を受け付ける設定情報受付部101、前記設定情報受付部101で受け付けた設定情報を記憶する設定情報記憶部102、及び、前記設定情報記憶部102が記憶している設定情報を参照し、前記筆記用シートに記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆記用シートに筆記された内容を示す筆跡情報に対して実行する筆跡情報処理部105として情報処理装置を機能させるプログラムである。
A program suitable for configuring the written content processing system 1 includes a process definition that defines one or more processes to be executed on handwriting information indicating the content written on the writing sheet, and the process definition. A setting
本筆記内容処理システム1を構成するために好適な読取装置は、筆記用シートに筆記された筆跡を筆跡情報として取得する筆跡情報取得部103と、筆記用シートに記入された、前記筆跡情報に対して実行するべき処理を指定するための処理識別子を取得する処理識別子取得部104と、前記処理識別子とは別に前記筆記用シートに記入された、前記処理の実行を開始する旨の意思を示す開始符号を検出する開始符号検出部106とを具備する。
A suitable reading device for configuring the writing content processing system 1 includes a handwriting
本筆記内容処理システム1とともに用いられる好適な筆記帳は、複数枚の筆記用シートを綴じてなり、その各筆記用シート毎に、筆記が行われる筆記領域と、前記筆記領域に筆記された内容を示す筆跡情報に対して実行するべき処理を指定するための処理識別子が記入される処理識別子記入領域とが設けられる。 A suitable writing book used together with the writing content processing system 1 is formed by binding a plurality of writing sheets, and for each writing sheet, writing area in which writing is performed, and contents written in the writing area. And a process identifier entry area in which a process identifier for designating a process to be executed is specified.
本発明によれば、筆記用シートに筆記された筆跡をディジタルデータ化して得られる筆跡情報の自動処理が可能である上、その処理の態様をユーザが任意に設定でき、かつその時々に応じて容易に処理の態様を選択できるようになる。 According to the present invention, automatic processing of handwriting information obtained by converting handwriting written on a writing sheet into digital data is possible, and the mode of the processing can be arbitrarily set by the user, and depending on the time A processing mode can be easily selected.
本発明の一実施形態を、図面を参照して説明する。図2に示すように、本実施形態の筆記内容処理システム1は、ユーザが筆記用シート41に筆記した内容を読み取りディジタルデータ化して筆跡情報を生成する読取装置2と、読取装置2と通信可能に接続し読取装置2が生成した筆跡情報を受け取って処理する情報処理装置3とを要素として構成される。
An embodiment of the present invention will be described with reference to the drawings. As shown in FIG. 2, the writing content processing system 1 according to the present embodiment can communicate with the
読取装置2は、筆記用シート41の集合体である筆記帳4を支持するデジタイザ21を主体とする。本実施形態では、筆記帳4として、複数枚の筆記用シート41の一辺を綴じた(特に、無線綴じ)ノートを想定している。この種のノート4は、開いた状態でその見開きの左右のページ41に筆記を行うことが可能である。これに対応して、図2及び図3に示すように、本実施形態のデジタイザ21は、ノート4の表表紙側を支持する左盤面211と、ノート4の裏表紙側を支持する右盤面212とを備える。ノート4を読取装置2とともに使用するにあたっては、ノート4の表表紙を左盤面211に対して例えば貼着等により固定し、ノート4の裏表紙を右盤面212に対してやはり貼着等により固定する。これは、各筆記用シート41とデジタイザ21との相対的な位置関係を不動とする、即ち、ノート4の見開きの左側のページ41と左盤面211との相対的な位置関係を不動とし、かつ右側のページ41と右盤面212との相対的な位置関係を不動とするために必要な措置である。無論、盤面211、212にポケットやホルダ、クリップ等を設けておき、当該ポケット等を利用してノート4の表表紙や裏表紙を盤面211、212に保定するものとしても構わない。
The
左盤面211及び右盤面212は、可撓性を有した布製、樹脂製または革製等で構成するカバー体213に取り付けることにより外観上一体化する。ノート4を開く際には、左盤面211及び右盤面212が同一平面上にあるようにカバー体213を展開する。ノート4を閉じる際には、左盤面211を右盤面212に重ねるように、カバー体213における左盤面211と右盤面212との間に位置する中間部位をヒンジとしてカバー体213を折り曲げ畳む。
The
デジタイザ21の左盤面211は、ノート4の見開きの表表紙側即ち左側のページ41に筆記される筆跡を読み取る。並びに、右盤面212は、ノート4の見開きの裏表紙側即ち右側のページ41に筆記される筆跡を読み取る。
The
図6に示すように、デジタイザ21は、CPU(Central Processing Unit)2a、メインメモリ2b、補助記憶デバイス2c、左盤面211内のアンテナコイル2d、右盤面212内のアンテナコイル2e、アンテナコイル2d、2eを駆動する駆動回路2f、通信インタフェース2g等のハードウェア資源を有し、これらがコントローラ(システムコントローラ、I/Oコントローラ等)2hにより制御されて連携動作するものである。
As shown in FIG. 6, the
補助記憶デバイス2cは、ROM(Read Only Memory)、フラッシュメモリ、ハードディスクドライブ、その他である。通信インタフェース2gは、情報処理装置3と無線または有線で接続してデータ通信を行うためのデバイスであり、無線LAN(Local Area Network)デバイス、bluetooth(登録商標)デバイス、USB(Universal Serial Bus)等に代表される。
The
CPU2aによって実行されるべきプログラムは補助記憶デバイス2cに格納されており、プログラムの実行の際には補助記憶デバイス2cからメインメモリ2bに読み込まれ、CPU2aによって解読される。そして、当該プログラムにより上記ハードウェア資源を作動して、図5に示す筆跡情報取得部103、処理識別子取得部104及び開始符号検出部106としての機能を発揮する。
A program to be executed by the
ここで、読取装置2がユーザの筆跡を読み取る仕組みについて補足する。本実施形態では、筆跡の読み取りに既知の電磁誘導方式を採用している。この電磁誘導方式では、ユーザが筆記用シート即ちノート4の各ページ41に筆記を行うための筆記具として、専用の電磁ペン22を使用する。図7に示すように、電磁ペン22は、筆記の際に筆記用シート41上にインクを塗布する芯2iと、現在筆記が行われていることを検知するスイッチ2jと、筆記が行われている間交番磁界を放射する送信コイル2kと、スイッチ2j及び送信コイル2kの各々に接続したコントローラ2lとを有する。
Here, it supplements about the mechanism in which the
芯2iは、インク収容部に収容しているインクを筆先から滲出させる、筆記具本来の役割を担う周知のものであり、その筆先が電磁ペン22の筐体から突出している。但し、芯2iは、黒鉛の芯を保持するシャープペンシル等であってもよい。芯2iは、コイルばね等の弾性付勢部材(図示せず)により、常時先端側に向けて弾性付勢されている。ユーザが電磁ペン22を使用して筆記を行うとき、筆記用シート41側から筆先に作用する押圧力が、この芯2iを若干ではあるが筐体内に向かって後退させる。すると、筐体に対して相対変位した芯2iがスイッチ2jを押下し、このスイッチ2jがON状態となる。ユーザが筆記を中断する、即ち筆先を筆記用シート41から離間させると、筆先に作用していた押圧力が消失し、弾性付勢部材の発揮する弾性付勢力により、後退していた芯2iが原位置に復帰する。さすれば、スイッチ2jが押下されていないOFF状態となる。
The lead 2i is a well-known one that plays the original role of a writing instrument that causes the ink contained in the ink containing portion to ooze out from the writing tip, and the writing tip protrudes from the casing of the
送信コイル2kは、筆先付近で芯2iの周囲に巻き回されている。コントローラ2lは、発振回路を包含しており、スイッチ2jがON状態である間、つまりはユーザが筆記を行っている間送信コイル2kに通電して、送信コイル2kにおいて磁界を発生させる。
The
他方、デジタイザ21の左盤面211及び右盤面212にはそれぞれ、送信コイル2kから放射される交番磁界を受信するアンテナコイル2d、2eが実装されている。アンテナコイル2d、2eは、互いに直交する二次元(X軸及びY軸)方向に多数の長方形コイルを平行に配列してなるもので、X軸方向に並ぶ長方形コイルが電磁誘導を通じて電磁ペン22の筆先のX軸方向の位置座標を検出し、Y軸方向に並ぶ長方形コイルが同じく電磁誘導を通じて電磁ペン22の筆先のY軸方向の位置座標を検出する。
On the other hand, antenna coils 2d and 2e for receiving an alternating magnetic field radiated from the
ユーザが筆記を行う際、電磁ペン22の筆先とデジタイザ21(のアンテナコイル2d、2e)との間に積層された複数枚の筆記用シート41が介在することがあるが、電磁誘導方式によれば、筆先とデジタイザ21との間にある程度の距離が生じていても、筆先の位置座標を適正に検出することができる。
When a user performs writing, a plurality of writing
因みに、電磁ペン22の送信コイル2kから交番磁界を放射させるための電力は、電磁ペン22に内蔵したバッテリから供給してもよいし、デジタイザ21から無線電力伝送の形で供給してもよい。後者の場合、電磁ペン22の送信コイル2kに、バッテリに替えてキャパシタを接続しておく。その上で、デジタイザ21のアンテナコイル2d、2eに交流電圧を印加することで、当該アンテナコイル2d、2eと電磁ペン22の送信コイル2kとの相互誘導、さらには電磁ペン22における送信コイル2kとキャパシタとのL−C共振を惹起し、電磁ペン22側に電力を蓄える。そして、その蓄えた電力を以て、電磁ペン22の送信コイル2kから交番磁界を放射する。
Incidentally, the power for radiating the alternating magnetic field from the
デジタイザ21は、ユーザが筆記を行っている間、アンテナコイル2d、2eを介して反復的に検出される電磁ペン22の筆先の位置座標(X,Y)の時系列を、順次メインメモリ2b若しくは補助記憶デバイス(ROMを除く)2cに記憶して保持する。図9に、筆先の移動の軌跡、及びこれに対応してメインメモリ2b若しくは補助記憶デバイス2cに記憶保持される筆先の位置座標(X,Y)の時系列の一例を示す。一つのストロークの位置座標(X,Y)の時系列は、ユーザが筆先を筆記用シート41に接触させてから、その筆先を筆記用シート41から離間させるまでの一筆書き(ストローク)の軌跡を表している。なお、各ストローク(または、そのストロークに含まれる筆先の各位置座標(X,Y))毎に、そのストロークが行われた(または、各位置座標(X,Y)を検出した)時刻を示すタイムスタンプ情報を付加してもよいが、そのようなタイムスタンプ情報は必須ではない。
The
なお、本実施形態では、左盤面211に載置されるノート4の左側のページ41上の位置と、右盤面212に載置されるノート4の右側のページ41上の位置とを、単一の座標系で取り扱うこととする。ある位置座標(X,Y)は、左盤面211及び右盤面212の両方を合わせた平面領域のうちの一点を指し示す。図4に示すように、ノート4の左側のページ41の左上の隅角の位置座標を原点(0,0)とし、右方向をX軸方向、下方向をY軸方向とおくと、(0,0)、(x1,0)、(0,y1)及び(x1,y1)の四点で規定される方形状の領域が左盤面211上の領域であり、(x1,0)、(x2,0)、(x1,y1)及び(x2,y1)の四点で規定される方形状の領域が右盤面212上の領域となる。要するに、位置座標(X,Y)は、その指し示す位置が左盤面211上にあるのか右盤面212上にあるのかをも特定する。換言すれば、左盤面211上の位置と右盤面212上の位置とが同一の位置座標値(X,Y)をとることはない。
In the present embodiment, the position on the
読取装置2の各機能ブロックに関して、筆跡情報取得部103は、ユーザが筆記用シートであるノート4の各ページ41に筆記した内容を示す筆跡情報を取得する。筆跡情報は、ノート4の各ページ41に予め設けられている筆記領域411内に筆記された筆跡の情報である。筆跡情報取得部103は、アンテナコイル2d、2eを介して検出され、メインメモリ2b若しくは補助記憶デバイス2cに記憶保持される筆先の位置座標(X,Y)の時系列のうちの、筆記領域411に相当する範囲内に属する位置座標の時系列を、筆跡情報として取得する。
For each functional block of the
処理識別子取得部104は、ユーザがノート4の各ページ41に記入する処理識別子を取得する。処理識別子の役割については後述するが、処理識別子は、ノート4の各ページ41に予め設けられている処理識別子記入領域412内に記入される符号であって、本実施形態では0から7までの何れかの数字である。処理識別子記入領域412は、筆記領域411とは重なり合わない。処理識別子取得部104は、アンテナコイル2d、2eを介して検出され、メインメモリ2b若しくは補助記憶デバイス2cに記憶保持される筆先の位置座標(X,Y)の時系列のうちの、処理識別子記入領域412に相当する範囲内に属する位置座標の時系列を、処理識別子として取得する。
The process
開始符号検出部106は、ユーザがノート4の各ページ41に記入する開始符号を検出する。開始符号は、ノート4の各ページ41に予め設けられている開始符号記入領域413内に記入される、処理識別子とは別の符号であって、本実施形態ではチェックマークや塗り潰し等である。開始符号記入領域413は、筆記領域411とも処理識別子記入領域412とも重なり合わない。開始符号検出部106は、アンテナコイル2d、2eを介して検出され、メインメモリ2b若しくは補助記憶デバイス2cに記憶保持される筆先の位置座標(X,Y)の時系列のうちの、開始符号記入領域413に相当する範囲内に属する位置座標の時系列を、開始符号として取得する。
The start
読取装置2のデジタイザ21は、ユーザがノート4の開始符号記入領域413に開始符号を記入したことを検出したときに、上記の筆跡情報及び処理識別子を、ページ41単位のデータとして、メインメモリ2b若しくは補助記憶デバイス(ROMを除く)2cの所要の記憶領域に保存する。即ち、左盤面211上にある左側のページ41の開始符号記入領域413に開始符号が記入された場合には、それまでに左盤面211のアンテナコイル2dを介して検出し記憶した筆先の位置座標(X,Y)の時系列を、一ページのデータとして保存する。このページのデータには、左側のページ41の筆記領域411に筆記された内容を示す筆跡情報、及び同ページ41の処理識別子記入領域412に記入された処理識別子が含まれる。
When the
翻って、右盤面212上にある右側のページ41の開始符号記入領域413に開始符号が記入された場合には、それまでに右盤面211のアンテナコイル2eを介して検出し記憶した筆先の位置座標の時系列を、一ページのデータとして保存する。このページのデータには、右側のページ41の筆記領域411に筆記された内容を示す筆跡情報、及び同ページ41の処理識別子記入領域412に記入された処理識別子が含まれる。
On the other hand, when a start code is entered in the start
ページ41のデータを保存した後に得られる筆先の位置座標(X,Y)は、別の新たなページのデータとして取り扱う。即ち、ユーザが左盤面211上にある左側のページ41の開始符号記入領域413に開始符号を記入した後、左盤面211のアンテナコイル2dを介して検出される筆先の位置座標の時系列は、先に保存した左側のページ41のデータとは別のページ41のデータとなる。当該ページ41のデータは、ユーザが再び左盤面211上のページ41の開始符号記入領域413に開始符号を記入したときに保存することとなる。
The position coordinates (X, Y) of the brush tip obtained after storing the data of the
同様に、ユーザが右盤面212上にある右側のページ41の開始符号記入領域413に開始符号を記入した後、右盤面212のアンテナコイル2eを介して検出される筆先の位置座標の時系列は、先に保存した右側のページ41のデータとは別のページ41のデータとなる。当該ページ41のデータは、ユーザが再び右盤面211上のページ41の開始符号記入領域413に開始符号を記入したときに保存することとなる。
Similarly, after the user enters the start code in the start
なお、通常、ノート4のあるページ41の開始符号記入領域413に開始符号を記入したユーザは、同ページ41にさらなる筆記をせず、同ページ41をめくって新たなページ41を盤面211、212上に表出させた上で、その新たなページ41に筆記を行う。
Normally, the user who entered the start code in the start
しかして、読取装置2のデジタイザ21は、このようにして保存した各ページ41毎のデータを、情報処理装置3に向けて、通信インタフェース2gを介して送信する。デジタイザ21と情報処理装置3との間のデータの送受信の手順については、後述する。
Thus, the
図11に、読取装置2のデジタイザ21がプログラムに従い実行する、筆跡情報及び処理識別子の保存の手順例を示す。デジタイザ21は、左盤面211のアンテナコイル2dまたは右盤面212のアンテナコイル2eを介して電磁ペン22の筆先の位置座標(X,Y)を検出したときに(ステップS21)、その検出した位置座標を順次メインメモリ2b若しくは補助記憶デバイス2cに一時的に記憶保持する(ステップS22)。
FIG. 11 shows an example of a procedure for storing handwriting information and a process identifier, which is executed by the
そして、その位置座標の時系列に基づき、左盤面211または右盤面212上で、筆記用シート41の開始符号記入領域413に開始符号が記入されたことを知得した場合には(ステップS23)、同筆記用シート41の筆記領域411に筆記された内容を示す筆跡情報、及び同筆記用シート41の処理識別子記入領域412に記入された処理識別子を含むデータを、情報処理装置3に送信するべき筆跡のデータとして、筆記用シート41単位で保存する(ステップS24)。デジタイザ21は、以上のステップS21ないしS24を反復的に遂行する。
Then, when it is known that the start code is entered in the start
情報処理装置3は、例えば携帯電話端末、スマートフォン、携帯可能なビデオゲーム機やパーソナルコンピュータ(ノートブック型コンピュータ、タブレット型コンピュータ、携帯情報端末等を含む)等の汎用的なコンピュータである。図8に示すように、情報処理装置3は、CPU3a、メインメモリ3b、補助記憶デバイス3c、操作入力デバイス3d、オーディオコーデック3e、ビデオコーデック3f、通信インタフェース3g、ディスプレイ3h、カメラ3i等のハードウェア資源を有し、これらがコントローラ(システムコントローラ、I/Oコントローラ等)3jにより制御されて連携動作するものである。
The
補助記憶デバイス3cは、ROM、フラッシュメモリ、ハードディスクドライブ、光学ディスクドライブ、その他である。操作入力デバイス3dは、ユーザが手指で操作可能なタッチパネル、トラックパッド若しくはペンタブレット、マウスといったポインティングデバイスや、キーボート(ポインティングデバイスを使用するいわゆるソフトウェアキーボードであることがある)、押下ボタン(テンキーやカーソルキー等を含む)等である。
The
オーディオコーデック3eは、符号化されている音声データを復号化してスピーカから音声出力したり、マイクを介して収音した音声を符号化したりする。ビデオコーデック3fは、CPU3aより受けた描画指示をもとに表示させるべき画面を生成しその画面信号をディスプレイ3hに向けて送出するGPU(Graphics Processing Unit)、画面のデータを一時的に格納しておくビデオメモリ等を要素とする。オーディオコーデック3e、ビデオコーデック3fはそれぞれ、ハードウェアでなくソフトウェアとして実装することも可能である。
The
通信インタフェース3gは、読取装置2のデジタイザ21と無線または有線で接続してデータ通信を行うためのデバイス、及び、インターネットや公衆電話網、携帯電話網、WAN(Wide Area Network)、LAN等の電気通信回線を経由したデータ通信を行うためのデバイスであり、無線LANデバイス、bluetooth(登録商標)デバイス、携帯電話網に接続するための無線デバイス、USB、NIC(Network Interface Card)等に代表される。
The
CPU3aによって実行されるべきプログラムは補助記憶デバイス3cに格納されており、プログラムの実行の際には補助記憶デバイス3cからメインメモリ3bに読み込まれ、CPU3aによって解読される。本実施形態では、既知のOS(Operating System)プログラムやこれに付帯する各種デバイスドライバプログラムが予めインストールされ、他のプログラムによる上記ハードウェア資源の利用を仲介する。そして、アプリケーションプログラムとして、電子メールクライアントプログラムやウェブブラウザプログラム、カメラ撮影制御プログラム等がインストールされている。その上で、本実施形態の筆記内容処理システム1を構成するために必要なプログラムがインストールされており、これらプログラムにより上記ハードウェア資源を作動して、図5に示す設定情報受付部101、設定情報記憶部102及び筆跡情報処理部105としての機能を発揮する。
A program to be executed by the
情報処理装置3の各機能ブロックに関して、設定情報受付部101は、ユーザによる設定情報の入力を受け付け、設定情報記憶部102は、その受け付けた設定情報を記憶して保持する。設定情報とは、ユーザが筆記用シート41上に筆記した内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と、当該処理定義を識別する識別子でありユーザが前記処理を実行させるために筆記用シート41に記入する処理識別子との組である。既に述べた通り、処理対象となる筆跡情報は、筆記用シート41の処理識別子記入領域412に記入された処理識別子とともに読取装置2のデジタイザ21において取得され、通信インタフェース2g、3gを介して情報処理装置3にもたらされる。
Regarding each functional block of the
設定情報の内容即ち各処理識別子毎の処理定義は、ユーザが任意に決定することができる。図10に、設定情報の例を示している。本実施形態では、筆跡情報に対して実行する処理内容の定義として、筆跡情報に付加するメタ情報の指定、筆跡情報の電子メールによる送信の宛先アドレスの指定、筆跡情報のアップロード先となる外部の情報処理装置(サーバ(いわゆるクラウドサービスであることがある)やパーソナルコンピュータ等)。図示せず)の指定等を想定している。図10に示した例に則して述べると、
・処理識別子の数字が0であれば、筆跡情報を情報処理装置3内(の補助記憶デバイス(ROMを除く)3c)に保存する。これは、保存という単一の処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が1であれば、筆跡情報に「保管」というメタ情報(筆跡情報を分類するタグ)を付した上で情報処理装置3内に保存する。これは、メタ情報の付与と保存という二つの処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が2であれば、筆跡情報に「至急」というメタ情報を付した上で情報処理装置3内に保存するとともに、同筆跡情報を宛先アドレス「abc@mail.xxx」に向けて電子メールの形で送信する。これは、メタ情報の付与と電子メール送信という二つの処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が3であれば、筆跡情報に「重要」というメタ情報を付した上で情報処理装置3内に保存するとともに、同筆跡情報を宛先アドレス「user@mail.yyy」に向けて電子メールの形で送信する。並びに、URI(Uniform Resource Identifier)「www.xxxx.com/yy_user/a/」で指定される外部の情報処理装置に向けて(より詳しくは、ドメイン名「www.xxxx.com」示される情報処理装置内における「/yy_user/a/」で指定される所定のディレクトリまたはフォルダに格納するべく)、HTTP(HyperText Transfer Protocol)やFTP(File Transfer Protocol)、SMB(Server Message Block)等の所定の通信プロトコルに則り、同筆跡情報をアップロード送信する。これは、メタ情報の付与、電子メール送信及びアップロードという三つの処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が4であれば、筆跡情報に「保管」及び「友人」というメタ情報を付した上で情報処理装置3内に保存するとともに、URI「www.zzzz.jp/yy_user/」で指定される外部の情報処理装置に向けて、所定の通信プロトコルに則り、同筆跡情報をアップロード送信する。これは、メタ情報の付与とアップロードという二つの処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が5であれば、筆跡情報を複数の宛先アドレス「abc@mail.xxx」及び「user@mail.yyy」に向けて電子メールの形で送信する。これは、二件の電子メール送信という二つの処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が6であれば、筆跡情報を宛先アドレス「user@mail.yyy」に向けて電子メールの形で送信する。並びに、URI「www.xxxx.com/yy_user/b/」及び「192.168.0.100/files/」で指定される複数の外部の情報処理装置に向けて、所定の通信プロトコルに則り、同筆跡情報をアップロード送信する。これは、電子メール送信及び二つの情報処理装置へのアップロードという三つの処理を筆跡情報に対して実行することを意味する
・処理識別子の数字が7であれば、筆跡情報にメタ情報としてタイムスタンプ(情報処理装置3の計時機能から取得できる)を付した上で情報処理装置3内に保存するとともに、URI「ccc.net/yy_user/calender/」で指定される外部の情報処理装置に向けて、所定の通信プロトコルに則り、同筆跡情報をアップロード送信する。これは、メタ情報の付与とアップロードという二つの処理を筆跡情報に対して実行することを意味する
というような態様である。
The contents of the setting information, that is, the process definition for each process identifier, can be arbitrarily determined by the user. FIG. 10 shows an example of setting information. In this embodiment, as the definition of the processing content to be executed for handwriting information, specification of meta information to be added to handwriting information, specification of a destination address for transmission of handwriting information by e-mail, external upload destination of handwriting information Information processing apparatus (server (may be a so-called cloud service), personal computer, etc.). (Not shown) is assumed. In accordance with the example shown in FIG.
If the number of the process identifier is 0, the handwriting information is stored in the information processing apparatus 3 (auxiliary storage device (excluding ROM) 3c). This means that a single process of saving is executed for handwriting information. If the number of the processing identifier is 1, meta information (a tag for classifying handwriting information) of “storage” is included in the handwriting information. Then, it is stored in the
因みに、筆跡情報のアップロード先としてURIで示される外部の情報処理装置が、いわゆるブログやSNS(Social Networking Service)、カレンダー若しくはスケジュール帳、スケジュール管理機能を有するグループウェア等のウェブアプリケーションまたはウェブサービスを提供するサーバである場合、当該サーバが筆跡情報を受信した日時または受信した筆跡情報に付されているタイムスタンプにより示される日時に応じた処理を、当該サーバにおいて実行することがある。例えば、2015年4月1日に当該サーバに送信した筆跡情報、または2015年4月1日のタイムスタンプとともに当該サーバに送信した筆跡情報が、2015年4月1日にブログに投稿された画像としてブログシステム上で表示されたり、カレンダー若しくはスケジュール帳の2015年4月1日の項目として登録されたりする等の処理がこれに当たる。 Incidentally, the external information processing device indicated by URI as the upload destination of handwriting information provides web applications or web services such as so-called blogs, SNS (Social Networking Services), calendars or schedule books, groupware with schedule management functions, etc. In the case of a server that performs this process, the server may execute processing according to the date and time when the server receives the handwriting information or the date and time indicated by the time stamp attached to the received handwriting information. For example, the handwriting information transmitted to the server on April 1, 2015, or the handwriting information transmitted to the server together with the time stamp of April 1, 2015 is posted on the blog on April 1, 2015. This may be displayed on the blog system or registered as an item on April 1, 2015 in the calendar or schedule book.
設定情報は、ユーザが情報処理装置3に直接手入力するか、ユーザが音声で指示するか、情報処理装置3以外にユーザが使用している情報処理装置(携帯電話端末、スマートフォン、携帯可能なビデオゲーム機やパーソナルコンピュータ等。図示せず)から電気通信回線経由で送信されるか、所定の記憶装置若しくは記録媒体に保存されているか、及び/または、用紙類に記載されている。故に、情報処理装置3の設定情報受付部101は、ユーザによる設定情報の手入力を操作入力デバイス3dを介して受け付け、ユーザによる設定情報の音声入力をマイクを介して受け付け、別の情報処理装置から送信される設定情報を通信インタフェース3gを介して受信し、所定の記憶装置若しくは記録媒体から設定情報を読み出し、及び/または、カメラモジュール3iを介して用紙類に記載された設定情報を光学的に読み取ることで、ユーザの意に沿った(ユーザにより作成される)設定情報の入力を受け付ける。そして、設定情報記憶部102は、このようにして受け付けた設定情報を、メインメモリ3b若しくは補助記憶デバイス(ROMを除く)3cの所要の記憶領域を利用して記憶保持する。
The setting information can be input manually by the user directly into the
図12に、情報処理装置3がプログラムに従い実行する、設定情報の受付の手順例を示す。情報処理装置3は、ある処理識別子に関連付けるべき一または複数の処理を定義する処理定義のユーザによる手入力または音声入力を受け付け、処理定義が記述されているデータを受信し、処理定義が記述されているデータを読み出し、または処理定義の記述を光学的に読み取る等の態様で、ユーザによる設定情報の入力を受け付ける(ステップS31)。そして、その受け付けた処理識別子及び処理定義の組を、設定情報としてメインメモリ3c若しくは補助記憶デバイス3cに保存する(ステップS32)。情報処理装置3は、以上のステップS31ないしS32を反復的に遂行する。
FIG. 12 shows an example of a procedure for accepting setting information, which is executed by the
筆跡情報処理部105は、読取装置2のデジタイザ21から送信される筆跡情報及びこれに付随する処理識別子を、通信インタフェース3gを介して受信する。それら筆跡情報及び処理識別子は、メインメモリ3b若しくは補助記憶デバイス(ROMを除く)3cに一時的に記憶される。そして、設定情報記憶部102に記憶している設定情報を参照して、受信した処理識別子と組となっている処理定義により定義された一または複数の処理を、受信した筆跡情報に対して実行する。
The handwriting
より具体的に述べると、情報処理装置3は、読取装置2のデジタイザ21に対し、デジタイザ21が取得した筆跡情報及び処理識別子の送信を要求する旨の指令を、通信インタフェース3gを介して送信する。この指令の送信は、所定間隔(例えば、10秒毎)に間欠的に行う。
More specifically, the
他方、デジタイザ21は、ユーザがノート4の何れかのページ41の開始符号記入領域413に開始符号を記入したことを検出する都度、当該ページ41に筆記された内容を表す筆跡情報及び同ページ41に記入された処理識別子を含むデータ、即ち当該ページ41における筆先の位置座標(X,Y)の時系列を、ページ41単位で保存して蓄積している。これと並行して、デジタイザ21は、情報処理装置3からもたらされる、筆跡情報及び処理識別子の送信を要求する旨の指令を恒常的に待ち受けており、当該指令を通信インタフェース2gを介して受信したときに、保存していたページ41単位の筆跡情報及び処理識別子を含むデータを、情報処理装置3に向けて通信インタフェース2gを介して送信する。開始符号の記入を検出するまでの間に複数ページ分のデータを蓄積していた場合には、その複数ページ分のデータをまとめて情報処理装置3に送信することとなる。
On the other hand, each time the
なお、読取装置2のデジタイザ21から情報処理装置3に筆跡情報を送信する際には、これを筆先の位置座標の時系列の形のままで送信してもよいし、当該位置座標の時系列を基にページ41の筆記領域411に筆記された内容を表すベクトル画像またはラスタ画像(ビットマップ画像)を生成して送信してもよい。
When handwriting information is transmitted from the
同様に、デジタイザ21から情報処理装置3に処理識別子を送信する際には、これを筆先の位置座標の時系列の形のままで送信してもよいし、当該位置座標の時系列を基にページ41の処理識別子記入領域412に記入された処理識別子を表すベクトル画像またはラスタ画像を生成して送信してもよい。あるいは、デジタイザ21側でOCR(Optical Character Recognition)を実行して処理識別子記入領域412に記入された処理識別子の数字を判別した上、その処理識別子の数字を数値として送信してもよい。
Similarly, when the processing identifier is transmitted from the
情報処理装置3は、デジタイザ21に向けて発した上記の指令に対する応答としてデジタイザ21からもたらされる、ノート4の各ページ41毎の筆跡情報及び処理識別子のデータを通信インタフェース3gを介して受信する。各ページ41に係る処理識別子が筆先の位置座標(X,Y)の時系列、ベクトル画像またはラスタ画像の形でデジタイザ21からもたらされる場合には、情報処理装置3側でOCRを実行し、処理識別子として各ページ41の処理識別子記入領域412に記入された数字を知得する。尤も、デジタイザ21側で既にOCRが実行されており、処理識別子の数字が数値としてデジタイザ21からもたらされる場合には、情報処理装置3側でOCRを実行して処理識別子が何であるかを判別する必要はない。
The
しかして、筆跡情報処理部105は、設定情報記憶部102に記憶している設定情報を検索し、知得した処理識別子の値と対応付けられている一または複数の処理に係る処理定義を知得する。その上で、処理識別子とともにデジタイザ21からもたらされる、ノート4の左側のページ41または右側のページ41の筆記領域411に筆記された内容を示す筆跡情報に対して、当該処理定義で定義されている一または複数の処理、即ち同ページ41の処理識別子記入領域412に記入された処理識別子に対応する一または複数の処理を実行する。
Thus, the handwriting
筆跡情報に対する処理として、筆跡情報を情報処理装置3の補助記憶デバイス3cに保存する際には、常に一定の保存先ディレクトリまたはフォルダ(OSまたはアプリケーションプログラムが提供するファイルシステムによる)に保存してもよいし、当該筆跡情報に係る処理識別子または当該筆跡情報に付されるメタ情報に応じて、保存先のディレクトリまたはフォルダを選定するようにしてもよい。後者の場合、処理識別子またはメタ情報に応じて保存先が異なることとなり、複数のページ(複数枚の筆記用シート)41の筆跡情報を、情報処理装置3内でページ(筆記用シート)41毎に分別することが可能となる。処理識別子またはメタ情報に対応する保存先のディレクトリまたはフォルダは、予めユーザによって指定され、設定情報として設定情報記憶部102に記憶していることは言うまでもない。
As a process for handwriting information, when handwriting information is stored in the
筆跡情報を電子メールとして送信、または外部のサーバ若しくはパーソナルコンピュータ等にアップロードする際には、当該筆跡情報に付されるメタ情報または処理識別子をも、当該筆跡情報とともに送信してよい。 When handwriting information is transmitted as an e-mail or uploaded to an external server or personal computer, meta information or a process identifier attached to the handwriting information may be transmitted together with the handwriting information.
筆跡情報を外部のサーバ若しくはパーソナルコンピュータ等にアップロードする際には、当該サーバ等へのアクセス権限を認証するためのユーザアカウント情報、典型的にはユーザID及びパスワードが必要となることがある。そのようなユーザアカウント情報もまた、設定情報の処理定義の一部として設定情報記憶部102に記憶される。
When handwriting information is uploaded to an external server or personal computer, user account information for authenticating access authority to the server or the like, typically a user ID and password may be required. Such user account information is also stored in the setting
図13及び図14に、読取装置2のデジタイザ21及び情報処理装置3の各々がプログラムに従い実行する、筆跡情報及び処理識別子の送受信及び筆跡情報の処理の手順例を示す。情報処理装置3は、デジタイザ21に向けて所定間隔で筆跡情報及び処理識別子の要求を送信する旨の指令を送信し(ステップS33)、デジタイザ21からもたらされるそれらのデータを待ち受ける。
FIG. 13 and FIG. 14 show a procedure example of handwriting information and processing identifier transmission / reception and handwriting information processing executed by each of the
デジタイザ21は、情報処理装置3からもたらされる上記の指令を待ち受けており、当該指令を受信したときに(ステップS25)、自身のメインメモリ2b若しくは補助記憶デバイス2cに保存し蓄積している、筆記用シート41の筆記領域411に筆記された内容を示す筆跡情報、及び同筆記用シート41の処理識別子記入領域412に記入された処理識別子を含む筆記用シート41単位のデータを情報処理装置3に向けて送信する(ステップS26)。しかる後、送信した筆跡情報及び処理識別子のデータに相当する筆先の位置座標の時系列を、メインメモリ2b若しくは補助記憶デバイス2cから消去する(ステップS27)。デジタイザは、以上のステップS25ないしS27を反復的に遂行する。
The
情報処理装置3は、デジタイザ21からもたらされる筆記用シート41単位の筆跡情報及び処理識別子を受信したとき(ステップS34)、受信した処理識別子に対応付けられている処理定義を設定情報から抽出し(ステップS37)、その処理定義で定義された処理、例えばメタ情報の付加、電子メールの形での送信、アップロード等を、当該処理識別子と組となっている筆跡情報、即ち当該処理識別子が記入された筆記用シート41に係る筆跡情報に対して実施する(ステップS38)。デジタイザ21から複数ページ(複数枚の筆記用シート41)分の筆跡情報及び処理識別子を一括に受信した場合、各筆記用シート41毎に記入された処理識別子が異なることで、各筆記用シート41に筆記された内容に係る筆記情報に対して実施する処理が筆記用シート41毎に異なり得ることは言うまでもない。
When the
但し、デジタイザ21からもたらされる処理識別子が筆先の位置座標の時系列、ベクトル画像またはラスタ画像の形をとる場合において、OCRによってその処理識別子の数字が何であるかを判別できなかったならば(ステップS35)、所定のエラー処理を実行する(ステップS36)。ステップS36では、例えば、デジタイザ21からもたらされた筆跡情報(及び、処理識別子)を処理することなく破棄する、補助記憶デバイス3cの所定のディレクトリまたはフォルダに保存する、または、特定の処理識別子(例えば、0)と組となっている処理定義で定義された処理を実行するようにする。情報処理装置3は、以上のステップS33ないしS38を反復的に遂行する。
However, in the case where the processing identifier provided from the
なお、情報処理装置3におけるステップS35以降の処理は、筆跡情報及び処理識別子の受信ステップS34の直後に実行されるとは限られない。ステップS31にて得た筆跡情報及び処理識別子をメインメモリ3b若しくは補助記憶デバイス3cに一旦記憶しておき、時間を経過した後に(特に、ユーザの手により操作入力デバイス3dを介した明示的な指令がなされた後に)ステップS35以降の処理を実行開始するようにしても構わない。複数のページ41に係る筆跡情報及び処理識別子を蓄積し、それら複数の筆跡情報及び処理識別子についてのステップS35以降の処理を、バッチ処理として一括して行ってもよい。
In addition, the process after step S35 in the
まとめると、ノート4の各ページ41に筆記した内容をディジタルデータ化して処理し活用することを目論むユーザは、筆記具である電磁ペン22を使用して、対象のページ41の処理識別子記入領域412に所望の処理に対応した処理識別子を記入した上で、同ページ41の開始符号記入領域413に開始符号を記入する。デジタイザ21は、電磁ペン22の筆先の位置座標(X,Y)を反復的に検出することを通じて、ユーザによる開始符号の記入操作を感知する。そして、開始符号の記入操作をトリガとして、同ページ41の筆記領域411に筆記された内容を示す筆跡情報と、同ページ41の処理識別子記入領域412に記入された処理識別子とを対にして保存するとともに、その保存した筆跡情報及び処理識別子を適時情報処理装置3に送信する。
In summary, a user who intends to digitize and process and use the contents written on each
ユーザが開始符号を記入した対象のページ41に係る筆跡情報及び処理識別子を受信した情報処理装置3は、自身が記憶保持している設定情報に基づき、当該筆跡情報に対して実行するべき一または複数の処理の内容を知得して、当該処理を実行する。結局、筆跡情報処理部105は、ユーザの手によってノート4のページ41に開始符号が記入されたことを契機(条件)として、同ページ41の筆跡情報に対する処理を実行するということになる。
The
本実施形態では、複数枚の筆記用シート41を有する筆記帳4とともに用いられるものであって、ユーザが前記筆記用シート41上に筆記した内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子でありユーザが前記処理を実行させるために前記筆記用シート41に記入する処理識別子との組である設定情報の、ユーザによる入力を受け付ける設定情報受付部101と、前記設定情報受付部101で受け付けた設定情報を記憶する設定情報記憶部102と、ユーザが前記筆記用シート41に筆記した筆跡を筆跡情報として取得する筆跡情報取得部103と、ユーザが前記筆記用シート41に記入した処理識別子を取得する処理識別子取得部104と、前記設定情報記憶部102が記憶している設定情報を参照し、前記処理識別子取得部104で取得した処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆跡情報取得部103で取得した筆跡情報に対して実行する筆跡情報処理部105とを具備する筆記内容処理システム1を構成した。
In this embodiment, it is used with the
本実施形態によれば、筆記用シート41に筆記された筆跡をディジタルデータ化して得られる筆跡情報の自動処理が可能となる。しかも、設定情報の入力を通じて、筆跡情報に対する処理の態様をユーザが任意に設定できる。さらには、筆記用シート41に記入する処理識別子の選択を通じて、その時々に応じた適切な処理をユーザが容易に選択できるようになる。
According to the present embodiment, it is possible to automatically process handwriting information obtained by converting handwriting written on the
前記処理識別子が、前記筆記帳4を構成する各筆記用シート41毎に記入されるものであり、前記筆跡情報処理部105が、ある筆記用シート41に記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、同一の筆記用シート41に筆記された内容を示す筆跡情報に対して実行するため、筆記帳4の各ページ41毎に、当該ページ41に筆記された内容に係る筆跡情報に対する処理を簡便に指定することができる。
The processing identifier is entered for each writing
ユーザが前記処理識別子とは別に前記筆記用シート41に記入する、前記処理の実行を開始する旨の意思を示す開始符号を検出する開始符号検出部106を具備し、前記筆跡情報処理部105が、前記筆記用シート41に前記開始符号が記入されたことを前記開始符号検出部106で検出したことを条件として、前記処理識別子と組となっている処理定義によって定義されている一または複数の処理を前記筆跡情報に対して実行するものとしたため、ユーザが筆跡情報を処理するタイミングを任意に制御できるようになる。即ち、ユーザが筆記用シート41に必要十分な筆記を行った時点で、その筆記内容に対する所望の処理の実行を開始することができる。加えて、その処理の実行後に当該筆記用シート41に追記した内容は処理対象としないようにすることも可能である。
A hand code
前記設定情報の処理定義に、前記筆跡情報に対する処理の内容を規定するものとして、筆跡情報に付加するメタ情報の指定、筆跡情報の保存先のディレクトリまたはフォルダの指定、筆跡情報の電子メールによる送信の宛先アドレスの指定、筆跡情報のアップロード先の指定、のうち少なくとも一つが含まれ、前記筆跡情報処理部105が、前記設定情報に基づき、処理定義により指定されたメタ情報を前記筆跡情報に付加、処理定義により指定された保存先のディレクトリまたはフォルダへの前記筆跡情報の保存、処理定義により指定された宛先アドレスに向けて前記筆跡情報を電子メールとして送信、処理定義により指定された宛先に向けて前記筆跡情報をアップロード、のうち少なくとも一つの処理を実行するため、筆記用シート41に筆記した内容をディジタルデータ化した筆跡情報をユーザの任意に応じて分別して保存したり、送信の形態や送信先を制御したりすることが可能であり、高い利便性を提供できる。
In the process definition of the setting information, the content of the process for the handwriting information is specified, specification of meta information to be added to the handwriting information, specification of a directory or folder where the handwriting information is stored, transmission of handwriting information by e-mail At least one of the destination address designation and the upload destination of the handwriting information is included, and the handwriting
読取装置2(のデジタイザ21)は、複数ページ分の筆跡情報及び処理識別子のデータを保存して蓄積しておくことができる。これにより、情報処理装置3が不在の状況や、情報処理装置3のバッテリが切れている状況等においても、読取装置2単独でユーザの筆記内容のディジタルデータ化のために運用することができる。事後、情報処理装置3と読取装置2との間の通信が可能となり、情報処理装置3から発される要求が読取装置2に受信されたときに、読取装置2が保存し蓄積していた各ページ41の筆跡情報及び処理識別子のデータが読取装置2から情報処理装置3に授受される。
The reading device 2 (the digitizer 21) can store and accumulate handwriting information and processing identifier data for a plurality of pages. Thereby, even in a situation where the
なお、本発明は以上に詳述した実施形態に限られるものではない。以下、本発明の変形例を列挙する。 The present invention is not limited to the embodiment described in detail above. Hereinafter, modifications of the present invention will be listed.
まず、筆記帳4はノートに限定されないことは言うまでもない。図13は、筆記用シートであるレポート用紙(または、メモ用紙)41を複数枚綴じたレポートパッド(または、メモ帳)4とともに用いられる筆記内容処理システム1の例である。図13に示す変形例における読取装置2のデジタイザ21は、アンテナコイル等を内蔵した単一の盤面を備える。筆記帳たるレポートパッド4を読取装置2とともに使用するにあたっては、レポートパッドの台紙をデジタイザ21の盤面に対して貼着等により固定して、筆記用シート41とデジタイザ21との相対的な位置関係を不動とする。
First, it goes without saying that the
筆記用シート41は、紙であるとは限らない。筆記用シート41が、電子ペーパ等であることもあり得る。筆記具22もまた、紙製の筆記用シート41にインクを塗布するようなものには限定されず、紙に付着するインク類を滲出させない(紙に筆跡を残す機能を有さない)態様のペン、スタイラス等であってもよい。
The writing
上記実施形態の読取装置2は、ユーザが筆記用シート41に対して筆記を行う際の筆記具22の筆先の位置座標(X,Y)を電磁誘導方式によって検出することで、筆跡情報及び処理識別子を取得するとともに開始符号の記入操作を感知していたが、筆跡情報、処理識別子及び開始符号の読み取りの仕組みは電磁誘導方式には限定されない。既知の他の方式、例えば、赤外線や超音波を用いた測距を伴う三角測量の手法によって筆先の位置座標を検出したり、予め筆記用シート41に印刷された微細なドットパターン(このドットパターンは、当該ドットパターンが付された箇所の位置座標を表している)を筆記具22の筆先近傍に設置したカメラで撮影することを通じて筆先の位置座標を検出したりする方式を用いて、筆跡情報、処理識別子及び開始符号の読み取りを実施することも考えられる。
The
また、読取装置2に設けたイメージセンサによって筆記用シート41を撮影または光学的にスキャンし、当該筆記用シート41上の筆跡情報、処理識別子及び開始符号を読み取ることを妨げない。この場合の筆跡情報、処理識別子及び開始符号は、ラスタ画像の形で読取装置2に取得されることとなる。
In addition, the writing
上記実施形態では、ユーザが筆跡情報に対して実行するべき処理を指定するために筆記用シート41に記入する処理識別子を0から7までの数字としていたが、数字以外の文字、記号、図形、塗り潰しマーク、文字列、バーコードや二次元コード等を、筆記用シート41に記入する処理識別子とすることができる。
In the above embodiment, the process identifier to be entered in the
読取装置2または情報処理装置3において、筆記用シート41の処理識別子記入領域412に記入される文字、記号、図形、塗り潰しマーク等の色を判別または知得することが可能である場合には、その色を処理識別子とすることができ、あるいは、同じ文字等であってもその色が異なる場合に別個の処理識別子として取り扱う(例えば、黒色の0と赤色の0とを異なる処理識別子とする)ことができる。つまりは、ユーザが処理識別子を記入する際に使用する筆記具22のインクの色に応じて、筆跡情報に対して実行する処理の内容を変えることができる。例えば、筆記具たる電磁ペン22に、スイッチ2jがON状態である間デジタイザ21に対して当該電磁ペン22のインクの色を示す情報を無線送信する機能を付与しておく。この情報を受信したデジタイザ21は、ユーザの筆記行為に基づく筆跡即ち筆先の位置座標(X,Y)の時系列とともに、ユーザが筆記行為において使用した電磁ペン22のインクの色を知得することができる。換言すれば、筆記用シート41上の処理識別子記入領域412に記入された処理識別子の色を判別できる。この処理識別子の色の情報をデジタイザ21から情報処理装置3に提供すれば、情報処理装置3において、処理識別子の色に応じた処理を選択して実行することが可能となる。
If the
上記実施形態では、ユーザが筆跡情報に対する処理の実行を開始する意思をもって筆記用シート41の開始符号記入領域413に記入する開始符号がチェックマーク(“レ”の字型)であったが、開始符号はチェックマーク以外の符号、例えば○、×、文字、数字、塗り潰しマーク等であってもよい。
In the above embodiment, the start code to be entered in the start
上記実施形態では、情報処理装置3が読取装置2に対して筆跡情報及び処理識別子の送信を要求し、これに呼応して読取装置2が情報処理装置3に対して自身が取得して蓄えた筆跡情報及び処理識別子を送信するプル型の送受信を行っていたが、読取装置2が取得した筆跡情報及び処理識別子を一方的に情報処理装置3に対して送信するプッシュ型の送受信を行うシステムとしてもよい。
In the above embodiment, the
プッシュ型の送受信を行うシステムにおける読取装置2のデジタイザ21は、ノート4のページ41の開始符号記入領域413に開始符号が記入されたことを検出した場合に、開始符号が記入されたページ41の筆跡情報及び処理識別子のデータを情報処理装置3に送信する。ユーザがノート4の左側のページ41の開始符号記入領域413に開始符号を記入したときには、左盤面211のアンテナコイル2dを介して検出し記憶した筆先の位置座標(X,Y)の時系列に基づく筆跡情報及び処理識別子を情報処理装置3に送信する。しかる後、その送信した筆跡情報及び処理識別子に相当する筆先の位置座標の時系列を、メインメモリ2b若しくは補助記憶デバイス2cから消去する。ここで送信されるのは、左側のページ41の筆記領域411に筆記された内容を示す筆跡情報、及び同ページ41の処理識別子記入領域412に記入された処理識別子を含むデータである。
When the
翻って、ユーザがノート4の右側のページ41の開始符号記入領域413に開始符号を記入したときには、右盤面212のアンテナコイル2eを介して検出し記憶した筆先の位置座標の時系列に基づく筆跡情報及び処理識別子を情報処理装置3に送信する。しかる後、その送信した筆跡情報及び処理識別子に相当する筆先の位置情報の時系列を、メインメモリ2b若しくは補助記憶デバイス2cから消去する。ここで送信されるのは、右側のページ41の筆記領域411に筆記された内容を示す筆跡情報、及び同ページ41の処理識別子記入領域412に記入された処理識別子を含むデータである。
In turn, when the user enters a start code in the start
上記実施形態では、筆記用シート41に筆記された内容に係る筆跡情報や記入された処理識別子を取得する読取装置2と、処理識別子に対応する処理を筆跡情報に対して実行する情報処理装置3とが別個のハードウェアとなっていたが、これらを単体のハードウェアによって実現することを妨げない。この場合、読取装置と一体化した情報処理装置が、設定情報受付部101、設定情報記憶部102、筆跡情報取得部103、処理識別子取得部104、筆跡情報処理部105及び開始符号検出部106の機能を発揮することになる。
In the above-described embodiment, the
上記実施形態における情報処理装置3は、ユーザが直接手で触れて使用することのできる携帯電話端末、スマートフォン、ビデオゲーム機、パーソナルコンピュータ等であったが、インターネットやWAN、LAN上に存在する、ユーザが直接手で触れることのできない(インターネット等を介してリモートアクセスすることはできる)サーバまたはパーソナルコンピュータ等に、設定情報に基づき筆跡情報を処理する情報処理装置3の役割を担わせることも考えられる。この場合、読取装置2が取得した筆跡情報及び処理識別子を、インターネット等経由で一旦当該サーバ等に送信する。そして、筆跡情報及び処理識別子を受信した当該サーバ等が、設定情報を参照し、処理識別子に対応した内容の処理を筆跡情報に対して実行する。つまり、インターネット、WANまたはLAN上に存在する当該サーバ等が、設定情報受付部101、設定情報記憶部102及び筆跡情報処理部105の機能を発揮することになる。
The
情報処理装置3が筆跡情報に対して実行する、処理識別子に対応付けられる処理の内容についても、種々の変形例が考えられる。例えば;
・筆跡情報のベクトル画像化またはラスタ画像化、筆跡情報のデータ形式またはファイル形式(PDF、EPS、PIX、BMP、JPEG、GIF、等々)の選択または変更、解像度の選択または変更、色数の変更(白黒(モノクロ)の二値化、グレースケール化等)、色調の変更、シャープ化その他のフィルタによる画像処理、印影のようなシンボル画像(シンボル画像は予め、情報処理装置3のメインメモリ3b若しくは補助記憶デバイス3cに保持している)を筆跡情報に付加または重畳した上で当該筆跡情報を保存。処理識別子と組となる処理定義が、保存または送信される筆跡情報のファイル形式、解像度、色数、色調の変更やフィルタ処理の内容等の指定を含んでおり、情報処理装置3においてその指定に則ったファイル形式、解像度、色数の画像を生成し、必要な場合には色調補正やフィルタ処理その他の処理を当該画像に施す。
・複数枚の筆記用シート41に係る複数の筆跡情報を、つなぎ合わせて一枚の画像ファイルにしたり、複数のページ(筆記用シート41毎の筆跡情報が各ページとなる)を包有する一つのPDFまたは文書ファイルの形にまとめたりする加工処理
・筆跡情報をOCR読み取りすることで、筆記用シート41に筆記された文字列の一部または全部をテキストデータとして抽出したり、筆記用シート41上に表された特徴的な画像やパターン(会社名のロゴマーク等)を抽出したり、さらには、抽出したテキストデータ、画像またはパターンに基づいて筆跡情報を分類(メタ情報の付与、保存先ディレクトリの選定、送信先の指定等)したりする処理
・筆跡情報の出力処理として、印刷、特定の記録媒体への書き込み、OCR読み取りにより筆跡情報から抽出した(ユーザが筆記用シート41に筆記した)文字列の音声出力、筆跡情報のデータファイルを他のアプリケーションソフトウェア(例えば、画像レタッチソフトや文書管理ソフト、PDF編集ソフト等。ウェブアプリケーションやSaaS(Software as a Service)であることがある)にオープンさせる等。処理識別子と組となる処理定義が、筆跡情報を出力するハードウェアまたは筆跡情報をオープンするアプリケーション等の指定を含んでおり、情報処理装置3においてその指定に則ったハードウェアを介して筆跡情報を出力させるか、その指定に則ったアプリケーションを起動して筆跡情報をオープンさせる
等を挙げることができる。
Various modifications can be considered for the contents of the process associated with the process identifier, which is executed by the
-Vectorization or rasterization of handwriting information, selection or change of data format or file format (PDF, EPS, PIX, BMP, JPEG, GIF, etc.) of handwriting information, selection or change of resolution, change of the number of colors (Monochrome (monochrome) binarization, gray scale conversion, etc.), color tone change, sharpening, image processing by other filters, symbol images such as imprints (symbol images are stored in advance in the
-A plurality of handwriting information related to a plurality of writing
その他、各部の具体的構成や処理の手順等は、本発明の趣旨を逸脱しない範囲で種々変形が可能である。 In addition, the specific configuration of each unit, the processing procedure, and the like can be variously modified without departing from the spirit of the present invention.
1…筆記内容処理システム
101…設定情報受付部
102…設定情報記憶部
103…筆跡情報取得部
104…処理識別子取得部
105…筆跡情報処理部
106…開始符号検出部
2…読取装置
3…情報処理装置
4…筆記帳
41…筆記用シート
DESCRIPTION OF SYMBOLS 1 ... Written
Claims (8)
前記筆記用シート上に筆記された内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子であり前記処理を実行させるために前記筆記用シートに記入される処理識別子との組である、任意に設定される設定情報の入力を受け付ける設定情報受付部と、
前記設定情報受付部で受け付けた設定情報を記憶する設定情報記憶部と、
前記筆記用シートに筆記された筆跡を筆跡情報として取得する筆跡情報取得部と、
前記筆記用シートに記入された処理識別子を取得する処理識別子取得部と、
前記設定情報記憶部が記憶している設定情報を参照し、前記処理識別子取得部で取得した処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆跡情報取得部で取得した筆跡情報に対して実行する筆跡情報処理部と
を具備する筆記内容処理システム。 Used with a writing book having a plurality of writing sheets,
A process definition that defines one or more processes to be executed on handwriting information indicating the contents written on the writing sheet, and an identifier that identifies the process definition. A setting information receiving unit that receives input of setting information that is arbitrarily set, which is a set with a processing identifier entered in the sheet;
A setting information storage unit for storing the setting information received by the setting information receiving unit;
A handwriting information acquisition unit for acquiring handwriting written on the writing sheet as handwriting information;
A processing identifier acquisition unit for acquiring a processing identifier entered in the writing sheet;
One or more processes defined by a process definition paired with a process identifier acquired by the process identifier acquisition unit with reference to the setting information stored in the setting information storage unit, the handwriting information acquisition A writing content processing system comprising: a handwriting information processing unit that executes the handwriting information acquired by the unit.
前記筆跡情報処理部は、ある筆記用シートに記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、同一の筆記用シートに筆記された内容を示す筆跡情報に対して実行する請求項1記載の筆記内容処理システム。 The processing identifier is entered for each writing sheet constituting the writing book,
The handwriting information processing unit is a handwriting indicating the content of one or more processes defined by a process definition paired with a process identifier entered in a certain writing sheet, written on the same writing sheet The written content processing system according to claim 1, which is executed on information.
前記筆跡情報処理部は、前記筆記用シートに前記開始符号が記入されたことを前記開始符号検出部が検出したことを条件として、前記処理識別子と組となっている処理定義によって定義されている一または複数の処理を前記筆跡情報に対して実行する請求項1または2記載の筆記内容処理システム。 A start code detection unit for detecting a start code indicating an intention to start execution of the process, which is entered in the writing sheet separately from the process identifier,
The handwriting information processing unit is defined by a process definition paired with the process identifier on the condition that the start code detection unit detects that the start code has been entered in the writing sheet. The writing content processing system according to claim 1 or 2, wherein one or a plurality of processes are executed on the handwriting information.
前記筆跡情報処理部は、前記設定情報に基づき、処理定義により指定されたメタ情報を前記筆跡情報に付加、処理定義により指定された保存先に前記筆跡情報を保存、処理定義により指定された宛先アドレスに向けて前記筆跡情報を電子メールとして送信、処理定義により指定された宛先に向けて前記筆跡情報をアップロード、のうち少なくとも一つの処理を実行する請求項1、2または3記載の筆記内容処理システム。 In the process definition of the setting information, as specifying the content of the process for the handwriting information, designation of meta information to be added to the handwriting information, designation of a storage destination of the handwriting information, designation of meta information to be added to the handwriting information, It includes at least one of the destination address specification for sending handwriting information via email and the destination for uploading handwriting information.
The handwriting information processing unit adds meta information specified by a process definition to the handwriting information based on the setting information, saves the handwriting information in a storage destination specified by the process definition, and a destination specified by the process definition The written content processing according to claim 1, 2 or 3, wherein at least one of the handwriting information is transmitted to an address as an e-mail and the handwriting information is uploaded to a destination specified by a processing definition. system.
前記筆記用シート上に筆記された内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子であり前記処理を実行させるために前記筆記用シートに記入される処理識別子との組である、任意に設定される設定情報の入力を受け付ける設定情報受付部と、
前記設定情報受付部で受け付けた設定情報を記憶する設定情報記憶部と、
前記設定情報記憶部が記憶している設定情報を参照し、前記筆記用シートに記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆記用シートに筆記された内容を示す筆跡情報に対して実行する筆跡情報処理部と
を具備する情報処理装置。 It is used to configure the written content processing system according to claim 1, 2, 3, or 4.
A process definition that defines one or more processes to be executed on handwriting information indicating the contents written on the writing sheet, and an identifier that identifies the process definition. A setting information receiving unit that receives input of setting information that is arbitrarily set, which is a set with a processing identifier entered in the sheet;
A setting information storage unit for storing the setting information received by the setting information receiving unit;
One or more processes defined by a process definition paired with a process identifier entered in the writing sheet with reference to the setting information stored in the setting information storage unit, the writing sheet An information processing apparatus comprising: a handwriting information processing unit that executes the handwriting information indicating the content written on the handwriting.
筆記用シート上に筆記された内容を示す筆跡情報に対して実行するべき一または複数の処理を定義する処理定義と当該処理定義を識別する識別子であり前記処理を実行させるために前記筆記用シートに記入される処理識別子との組である、任意に設定される設定情報の入力を受け付ける設定情報受付部、
前記設定情報受付部で受け付けた設定情報を記憶する設定情報記憶部、及び、
前記設定情報記憶部が記憶している設定情報を参照し、前記筆記用シートに記入された処理識別子と組となっている処理定義によって定義されている一または複数の処理を、前記筆記用シートに筆記された内容を示す筆跡情報に対して実行する筆跡情報処理部
として情報処理装置を機能させるプログラム。 It is used to configure the written content processing system according to claim 1, 2, 3, or 4.
A processing definition that defines one or a plurality of processes to be executed on handwriting information indicating the contents written on the writing sheet, and an identifier for identifying the processing definition, and the writing sheet for executing the process A setting information receiving unit that receives an input of arbitrarily set setting information, which is a set with a processing identifier entered in
A setting information storage unit for storing the setting information received by the setting information receiving unit; and
One or more processes defined by a process definition paired with a process identifier entered in the writing sheet with reference to the setting information stored in the setting information storage unit, the writing sheet A program that causes the information processing apparatus to function as a handwriting information processing unit that is executed on handwriting information indicating the contents written on the screen.
筆記用シートに筆記された筆跡を筆跡情報として取得する筆跡情報取得部と、
筆記用シートに記入された、前記筆跡情報に対して実行するべき処理を指定するための処理識別子を取得する処理識別子取得部と、
前記処理識別子とは別に前記筆記用シートに記入された、前記処理の実行を開始する旨の意思を示す開始符号を検出する開始符号検出部と
を具備する読取装置。 It is used to configure the written content processing system according to claim 1, 2, 3, or 4.
A handwriting information acquisition unit for acquiring handwriting written on the writing sheet as handwriting information;
A process identifier acquisition unit for acquiring a process identifier for designating a process to be executed on the handwriting information entered in the writing sheet;
A reading apparatus comprising: a start code detection unit that detects a start code that is written on the writing sheet separately from the process identifier and indicates an intention to start execution of the process.
複数枚の筆記用シートを綴じてなり、その各筆記用シート毎に、筆記が行われる筆記領域と、前記筆記領域に筆記された内容を示す筆跡情報に対して実行するべき処理を指定するための処理識別子が記入される処理識別子記入領域とを設けている筆記帳。 It is used with the written content processing system according to claim 1, 2, 3, or 4,
To bind a plurality of writing sheets, and for each writing sheet, specify a writing area where writing is performed and a process to be performed on handwriting information indicating the contents written in the writing area A writing book provided with a process identifier entry area in which the process identifier is entered.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014146193A JP6340275B2 (en) | 2014-07-16 | 2014-07-16 | Written content processing system, information processing device, program |
PCT/JP2015/070206 WO2016010054A1 (en) | 2014-07-16 | 2015-07-14 | Handwritten content processing system, information processing device, program, reading device, and notebook |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014146193A JP6340275B2 (en) | 2014-07-16 | 2014-07-16 | Written content processing system, information processing device, program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016024504A true JP2016024504A (en) | 2016-02-08 |
JP6340275B2 JP6340275B2 (en) | 2018-06-06 |
Family
ID=55078544
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014146193A Active JP6340275B2 (en) | 2014-07-16 | 2014-07-16 | Written content processing system, information processing device, program |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6340275B2 (en) |
WO (1) | WO2016010054A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017151190A (en) * | 2016-02-23 | 2017-08-31 | 公立大学法人首都大学東京 | Learning tool and program |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10522963B2 (en) * | 2016-08-30 | 2019-12-31 | Corning Incorporated | Laser cutting of materials with intensity mapping optical system |
CN111079636B (en) * | 2019-12-12 | 2024-02-02 | 国网电子商务有限公司 | Method and device for controlling dot matrix intelligent writing data return |
CN111274868A (en) * | 2020-01-07 | 2020-06-12 | 北京小米移动软件有限公司 | Method and device for processing writing information of notebook computer |
CN113128470B (en) * | 2021-05-13 | 2023-04-07 | 北京有竹居网络技术有限公司 | Stroke recognition method and device, readable medium and electronic equipment |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011232953A (en) * | 2010-04-27 | 2011-11-17 | Sony Corp | Information processor, information processing method and program, and information processing system |
JP2012108657A (en) * | 2010-11-16 | 2012-06-07 | Sharp Corp | Portable information terminal |
WO2013015283A1 (en) * | 2011-07-25 | 2013-01-31 | ブラザー工業株式会社 | Electronic writing device and electronic writing system |
JP2014086053A (en) * | 2012-10-26 | 2014-05-12 | Brother Ind Ltd | Information management device and information management program |
-
2014
- 2014-07-16 JP JP2014146193A patent/JP6340275B2/en active Active
-
2015
- 2015-07-14 WO PCT/JP2015/070206 patent/WO2016010054A1/en active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011232953A (en) * | 2010-04-27 | 2011-11-17 | Sony Corp | Information processor, information processing method and program, and information processing system |
JP2012108657A (en) * | 2010-11-16 | 2012-06-07 | Sharp Corp | Portable information terminal |
WO2013015283A1 (en) * | 2011-07-25 | 2013-01-31 | ブラザー工業株式会社 | Electronic writing device and electronic writing system |
JP2014086053A (en) * | 2012-10-26 | 2014-05-12 | Brother Ind Ltd | Information management device and information management program |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017151190A (en) * | 2016-02-23 | 2017-08-31 | 公立大学法人首都大学東京 | Learning tool and program |
Also Published As
Publication number | Publication date |
---|---|
WO2016010054A1 (en) | 2016-01-21 |
JP6340275B2 (en) | 2018-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6340275B2 (en) | Written content processing system, information processing device, program | |
US9712710B2 (en) | System, method, and terminal device for providing service | |
JP6733323B2 (en) | Mediation server | |
JP6733393B2 (en) | Shared terminal, communication system, image transmission method, and program | |
US10168968B2 (en) | Communication system to perform data communication between an image forming apparatus and a service providing apparatus | |
US9110617B2 (en) | Cooperative image processing system, cooperative image processing method, portable information apparatus, image processing apparatus, and recording medium | |
GB2484001A (en) | Image-processing system and method using mobile device | |
US9420144B2 (en) | Image forming device to provide preview image for editing manuscript image, display apparatus to display and edit the preview image, and methods thereof | |
US20130208007A1 (en) | Position-related information registration apparatus, position-related information registration system, position-related information registration and display system, and recording medium | |
US10447871B2 (en) | Information processing device for controlling display of device, information processing method, and non-transitory computer readable medium | |
US9800318B2 (en) | Information processing system for operating devices connected to different networks using single process request | |
US20210144789A1 (en) | Information processing device and non-transitory computer readable medium | |
CN107148618A (en) | Information processing system, message processing device and information processing method | |
US20130308159A1 (en) | Image forming system, image forming apparatus, and recording medium | |
JP2015089008A (en) | Image formation system, image formation method, image formation management device, image formation device and information processing device | |
JP6763209B2 (en) | Programs and mobile terminals | |
JP6582845B2 (en) | Image processing apparatus, registration method, program, and information processing system | |
US9413841B2 (en) | Image processing system, image processing method, and medium | |
US9432526B2 (en) | Image forming system, image forming apparatus, remote control apparatus, and recording medium for displaying an input screen | |
JP6805625B2 (en) | Systems, electronics, authentication processing methods and programs | |
US20190036936A1 (en) | Information processing device and non-transitory computer readable medium | |
JP6470636B2 (en) | Information processing apparatus, control method thereof, and program | |
JP6019872B2 (en) | Data kit | |
JP2014048899A (en) | Management device and management program | |
JP6975414B2 (en) | Programs and mobile terminals |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20151109 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170310 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171211 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180322 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180417 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180514 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6340275 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |