JP6528450B2 - Handwriting input device - Google Patents
Handwriting input device Download PDFInfo
- Publication number
- JP6528450B2 JP6528450B2 JP2015033045A JP2015033045A JP6528450B2 JP 6528450 B2 JP6528450 B2 JP 6528450B2 JP 2015033045 A JP2015033045 A JP 2015033045A JP 2015033045 A JP2015033045 A JP 2015033045A JP 6528450 B2 JP6528450 B2 JP 6528450B2
- Authority
- JP
- Japan
- Prior art keywords
- sheet
- input device
- handwriting input
- sensor sheet
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- User Interface Of Digital Computer (AREA)
Description
本発明は、入力ペンとセンサシートを利用する手書き入力装置に関する。 The present invention relates to a handwriting input device using an input pen and a sensor sheet.
感圧式タッチパネルを備える手書き入力装置の一例が特許文献1に記載されている。この手書き入力装置は、タッチパネル上に配置した用紙にユーザがペンなどで手書き入力を行うと、その筆跡を電子筆跡として取得し、PDAに入力する。 Patent Document 1 describes an example of a handwriting input device including a pressure-sensitive touch panel. In the handwriting input device, when the user performs handwriting input on a sheet placed on the touch panel with a pen or the like, the handwriting is acquired as electronic handwriting and is input to the PDA.
通常、タッチパネル上に用紙を配置して手書き入力を行う際には、用紙がタッチパネルに対してずれたり傾いたりすると、手書き入力情報を正しく取得することができない。この点、特許文献1では、用紙束が手帳本体に取り付けられているため、記入中に用紙が動いてしまうことを想定していない。 Generally, when a sheet is placed on a touch panel and handwriting input is performed, if the sheet is shifted or inclined with respect to the touch panel, handwriting input information can not be acquired correctly. In this respect, in Patent Document 1, since the sheet bundle is attached to the notebook body, it is not assumed that the sheet moves during the entry.
本発明は、用紙がずれたり傾いたりした場合でも、手書き入力された情報を正しく出力することが可能な手書き入力装置を提供することを主な目的とする。 The main object of the present invention is to provide a handwriting input device capable of correctly outputting information input by handwriting even when the sheet is shifted or inclined.
本発明の1つの観点は、用紙と、入力装置とを備える手書き入力装置であって、前記用紙は、予め決められた異なる位置に複数のチェックボックスが設けられており、各チェックボックス内には所定形状のマークが印刷されており、前記入力装置は、静電容量の変化を検知するセンサシートと、前記センサシートの接触位置における静電容量の変化を検出することにより、入力情報を検出する入力情報検出手段と、前記センサシート上に配置された用紙のチェックボックス内に導電性のインクにより記入された前記所定形状の複数のマークの位置を検出するマーク検出手段と、前記複数のマークの位置に基づいて、前記センサシート上に配置された用紙のセンサシートに対する位置及び傾きを検出する配置状態検出手段と、検出された位置及び傾きに基づいて、前記入力情報を補正して出力する補正手段と、を備える。
One aspect of the present invention is a handwriting input device comprising a sheet of paper and an input device, wherein the sheet of paper is provided with a plurality of check boxes at different predetermined positions, and within each check box A mark of a predetermined shape is printed, and the input device detects input information by detecting a change in capacitance at a contact position between the sensor sheet that detects a change in capacitance and the sensor sheet. Input information detection means, mark detection means for detecting the positions of a plurality of marks of the predetermined shape entered with conductive ink in a check box of a sheet disposed on the sensor sheet, and Position detection means for detecting the position and the inclination of the sheet placed on the sensor sheet with respect to the sensor sheet based on the position; Based on the slope, and a correcting means for outputting the correcting the input information.
上記の手書き入力装置は、用紙と、入力装置とを備える。用紙は、予め決められた異なる位置に複数のチェックボックスが設けられており、各チェックボックス内には所定形状のマークが印刷されている。ユーザは、用紙への記入開始時に、まず、導電性のインクが入ったペンなどで各チェックボックス内の所定形状のマークをなぞることによりマークを記入する。入力装置は、静電容量方式のセンサシートにより、ペンなどの接触位置における静電容量の変化を検出して入力情報を検出する。センサシート上に配置される用紙には、ユーザが導電性のインクで記入した所定形状の複数のマークがあり、センサシートはそれらのマークを検出する。検出された複数のマークの位置に基づいて、センサシート上に配置された用紙のセンサシートに対する位置及び傾きが検出され、その位置及び傾きに基づいて入力情報が補正される。これにより、用紙がセンサシートに対してずれたり傾いたりして配置された場合でも、用紙に対する入力情報を正しく取得することができる。
The above-described handwriting input device includes a sheet and an input device. The sheet is provided with a plurality of check boxes at different positions determined in advance, and a mark of a predetermined shape is printed in each check box. At the start of writing on a sheet, the user first writes a mark by tracing a mark of a predetermined shape in each check box with a pen or the like containing conductive ink. The input device detects input information by detecting a change in capacitance at a contact position of a pen or the like by a capacitive sensor sheet. The paper to be placed on the sensor sheet, a plurality of marks of a predetermined shape that the user has filled with conductive ink, the sensor sheet to detect these marks. Based on the positions of the plurality of marks detected, the position and the inclination of the sheet placed on the sensor sheet with respect to the sensor sheet are detected, and the input information is corrected based on the positions and the inclination. As a result, even when the sheet is displaced or inclined with respect to the sensor sheet, input information on the sheet can be correctly acquired.
上記の手書き入力装置の一態様では、前記配置状態検出手段は、前記センサシート上における前記複数のマークの位置座標に基づいて、前記センサシートの原点座標と前記用紙の原点座標との関係を算出し、前記用紙のセンサシートに対する位置を検出する。また、前記配置状態検出手段は、前記センサシート上における前記複数のマークの位置座標に基づいて、前記用紙のセンサシートに対する傾きを検出する。 In one aspect of the above-described handwriting input device, the arrangement state detection unit calculates the relationship between the origin coordinates of the sensor sheet and the origin coordinates of the sheet based on the position coordinates of the plurality of marks on the sensor sheet. And detect the position of the sheet with respect to the sensor sheet. Further, the arrangement state detection means detects an inclination of the sheet with respect to the sensor sheet based on position coordinates of the plurality of marks on the sensor sheet.
上記の手書き入力装置の他の一態様では、前記入力情報検出手段、前記マーク検出手段、前記配置状態検出手段及び前記補正手段は、前記ペンによる入力が継続している間繰り返し動作し、補正後の入力情報を出力し続ける。これにより、ユーザの手書き入力中に用紙の位置がセンサシート上で動いてしまったとしても、入力情報を正しく取得し続けることができる。 In another aspect of the above-mentioned handwriting input device, the input information detection means, the mark detection means, the arrangement state detection means and the correction means repeatedly operate while the input by the pen is continued, and after correction Keep outputting the input information of. As a result, even if the position of the sheet has moved on the sensor sheet during handwriting input by the user, it is possible to continue acquiring input information correctly.
上記の手書き入力装置の他の一態様は、補正後の前記入力情報を外部の端末装置へ送信する送信手段を備える。これにより、入力情報を外部の端末装置などに表示することができる。 Another aspect of the above-described handwriting input device includes transmission means for transmitting the corrected input information to an external terminal device. Thus, the input information can be displayed on an external terminal device or the like.
好適な例では、前記チェックボックスは、前記用紙の4隅に設けられている。
In a preferred example, the check box is provided at four corners of the sheet .
他の好適な例では、手書き入力装置は、静電容量の変化に基づいて、導電性材料を含む消しゴムが移動した範囲を消去範囲と判定し、当該消去範囲に属する入力情報を消去する消去手段を備える。これにより、記入情報の消去が可能となる。 In another preferable example, the handwriting input device determines the range to which the eraser including the conductive material has moved as the erase range based on the change in capacitance, and erases the input information belonging to the erase range. Equipped with This makes it possible to delete the entry information.
他の好適な例では、前記センサシートの両面は、透明な樹脂により覆われる。これにより、手書き入力装置を本などに挟んで使用することが可能となる。 In another preferred embodiment, both sides of the sensor sheet are covered by a transparent resin. This makes it possible to use the handwriting input device in a book or the like.
以下、図面を参照しながら、本発明の実施の形態について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[構成]
図1は、本発明の実施例に係る手書き入力システムの概略構成を示す。手書き入力システムは、手書き入力装置(以下、単に「入力装置」と呼ぶ。)10と、端末装置20とを備える。入力装置10は、ユーザがペン32により用紙31に記入した情報(以下、「手書き入力情報」と呼ぶ。)を取得し、無線通信により端末装置20に送信する。端末装置20は、入力装置10から受信した手書き入力情報を表示する。
[Constitution]
FIG. 1 shows a schematic configuration of a handwriting input system according to an embodiment of the present invention. The handwriting input system includes a handwriting input device (hereinafter simply referred to as “input device”) 10 and a terminal device 20. The input device 10 acquires information (hereinafter referred to as “handwriting input information”) written on the sheet 31 by the user with the pen 32 and transmits the information to the terminal device 20 by wireless communication. The terminal device 20 displays the handwriting input information received from the input device 10.
入力装置10は、センサシート11と、回路部18とを備える。センサシート11は、静電容量式であり、矩形の形状を有する。回路部18は、入力装置10の所定の端部に設けられ、後述する通信部、記憶部などを構成する回路が形成される。 The input device 10 includes a sensor sheet 11 and a circuit unit 18. The sensor sheet 11 is capacitive and has a rectangular shape. The circuit unit 18 is provided at a predetermined end of the input device 10, and a circuit that configures a communication unit, a storage unit, and the like described later is formed.
入力を行う際、ユーザはセンサシート11上に用紙31を配置し、ペン32により用紙に手書き入力(記入)を行う。用紙は無地であってもよいし、予め何かが印刷されていてもよい。ペン32は、例えば鉛筆、シャープペンなどであり、芯の部分、すなわちセンサシート11と接触する部位に導電性材料が含まれていればよい。センサシート11は、ペン32の導電性材料の接触、あるいは近接により内部電極の静電容量の変化を検出し、ペン32が用紙31を介してセンサシート11に接触している位置の位置座標を特定する。ペン32のセンサシート11に対する接触位置の座標を連続的に検出することにより、ユーザが手書きした文字、記号、絵などを取得することができる。 At the time of input, the user arranges the sheet 31 on the sensor sheet 11 and performs handwriting input (entry) on the sheet by the pen 32. The sheet may be plain, or something may be printed in advance. The pen 32 is, for example, a pencil, a mechanical pen, etc., and a conductive material may be included in the core portion, that is, the portion in contact with the sensor sheet 11. The sensor sheet 11 detects a change in electrostatic capacitance of the internal electrode by the contact or proximity of the conductive material of the pen 32, and the position coordinates of the position where the pen 32 is in contact with the sensor sheet 11 via the sheet 31 Identify. By continuously detecting the coordinates of the contact position of the pen 32 with respect to the sensor sheet 11, it is possible to acquire characters, symbols, pictures, etc. handwritten by the user.
端末装置20は、入力装置10が取得した手書き入力情報を表示するための装置であり、用紙31に対応する一定の表示面積を有することが好ましい。図1では、端末装置20としてタブレット型端末装置を図示しているが、端末装置20は通常のデスクトップPCやラップトップPCなどであってもよい。 The terminal device 20 is a device for displaying the handwriting input information acquired by the input device 10, and preferably has a certain display area corresponding to the sheet 31. Although FIG. 1 illustrates a tablet terminal device as the terminal device 20, the terminal device 20 may be a normal desktop PC, a laptop PC, or the like.
図2は、入力装置10の機能構成を示す。入力装置10は、センサシート11に加えて、通信部12、タイマー13、メモリ14、データ記憶部15、制御部16を備える。なお、通信部12、タイマー13、メモリ14、データ記憶部15及び制御部16は、図1に示す回路部18に設けられる。 FIG. 2 shows a functional configuration of the input device 10. The input device 10 includes a communication unit 12, a timer 13, a memory 14, a data storage unit 15, and a control unit 16 in addition to the sensor sheet 11. The communication unit 12, the timer 13, the memory 14, the data storage unit 15, and the control unit 16 are provided in the circuit unit 18 shown in FIG.
通信部12は、例えばBluetooth(登録商標)などの無線通信により、入力装置10が取得した手書き入力情報を端末装置20へ送信する。タイマー13は、現在時刻を計測する。 The communication unit 12 transmits the handwriting input information acquired by the input device 10 to the terminal device 20 by wireless communication such as Bluetooth (registered trademark), for example. The timer 13 measures the current time.
メモリ14は、後述する手書き入力情報の位置補正などを行うためのプログラムを記憶している。また、メモリ14は、位置補正を行う際の作業メモリとしても機能する。 The memory 14 stores a program for performing position correction of handwriting input information described later. The memory 14 also functions as a working memory when performing position correction.
データ記憶部15は、ユーザが手書き入力を行った際にセンサシート11が検出した記入位置などを含む記入データを記憶する。記入データの詳細については後述する。 The data storage unit 15 stores entry data including the entry position detected by the sensor sheet 11 when the user performs handwriting input. Details of the entry data will be described later.
制御部16は、メモリ14に予め記憶されたプログラムを実行することにより、入力装置10全体を制御するとともに、手書き入力情報の位置補正を行う。 The control unit 16 controls the entire input device 10 by executing a program stored in advance in the memory 14 and performs position correction of handwritten input information.
上記の構成において、センサシート11は本発明の手書き入力情報検出手段及びマーク検出手段の一例であり、制御部16は配置状態検出手段及び補正手段の一例であり、通信部12は送信手段の一例である。 In the above configuration, the sensor sheet 11 is an example of the handwriting input information detection means and the mark detection means of the present invention, the control unit 16 is an example of the arrangement state detection means and the correction means, and the communication unit 12 is an example of the transmission means. It is.
図3は、端末装置20の機能構成を示す。端末装置20は、表示部21と、通信部22と、制御部23とを備える。表示部21は例えば液晶ディスプレイなどである。通信部22は、無線通信により入力装置10の通信部12と通信し、入力装置10から手書き入力情報を受信する。制御部23は、端末装置20の全体を制御する。また、制御部23は、通信部22が入力装置10から受信した手書き入力情報を表示部21に表示する処理を行う。 FIG. 3 shows a functional configuration of the terminal device 20. The terminal device 20 includes a display unit 21, a communication unit 22, and a control unit 23. The display unit 21 is, for example, a liquid crystal display. The communication unit 22 communicates with the communication unit 12 of the input device 10 by wireless communication, and receives handwriting input information from the input device 10. The control unit 23 controls the entire terminal device 20. Further, the control unit 23 performs a process of displaying the handwriting input information received by the communication unit 22 from the input device 10 on the display unit 21.
[位置補正]
図1に示すように、ユーザが用紙31を入力装置10のセンサシート11上に配置してペン32により手書き入力を行う場合、通常ユーザは用紙31をセンサシート11の中央付近に配置する。その際、ユーザは必ずしも用紙31の4辺がセンサシート11の4辺とそれぞれ平行になるように配置するとは限らない。また、用紙31をテープなどでセンサシート11に固定しない限り、ユーザが手書き入力を続けるのに伴って用紙31がずれたり回転したりしてしまうことが多い。具体的には、右利きのユーザが右手で手書き入力を続けると、用紙31が徐々に右方向へずれていったり、用紙が上下方向へ(時計まわり又は反時計まわりに)回転していったりする傾向がある。そこで、本実施例では、ユーザが手書き入力を開始する際、及び、手書き入力を続ける間に生じる用紙31のずれを検出し、これに基づいて手書き入力情報を補正する。これを以下、「位置補正」と呼ぶ。
[Position correction]
As shown in FIG. 1, when the user arranges the sheet 31 on the sensor sheet 11 of the input device 10 and performs handwriting input with the pen 32, the user usually arranges the sheet 31 near the center of the sensor sheet 11. At this time, the user does not necessarily arrange the four sides of the sheet 31 so as to be parallel to the four sides of the sensor sheet 11. In addition, unless the sheet 31 is fixed to the sensor sheet 11 by a tape or the like, the sheet 31 often shifts or rotates as the user continues the handwriting input. Specifically, when the right-handed user continues handwriting input with the right hand, the paper 31 is gradually shifted to the right, or the paper is rotating up and down (clockwise or counterclockwise) There is a tendency to So, in a present Example, when a user starts handwriting input and the shift of the paper 31 which arises while continuing handwriting input is detected, based on this, handwriting input information is correct | amended. This is hereinafter referred to as "position correction".
具体的に、本実施例では、用紙31に予め複数のマークを形成しておき、このマークを検出することにより、用紙31の配置状態、具体的にはセンサシート11に対する用紙31の位置及び用紙31の傾きを検出する。そして、検出した用紙の位置及び傾きに基づいて、センサシート11が検出した記入位置を補正する。 Specifically, in the present embodiment, a plurality of marks are formed in advance on the sheet 31, and the arrangement state of the sheet 31, specifically, the position of the sheet 31 with respect to the sensor sheet 11 and the sheet are detected by detecting the marks. Detect the inclination of 31. Then, based on the detected position and inclination of the sheet, the writing position detected by the sensor sheet 11 is corrected.
まず、センサシート11に対する用紙31の位置に関する補正について説明する。図4(A)は、用紙31をセンサシート11上に配置した状態を示す。図示のように、用紙31は四隅にマークM1〜M4が設けられている。なお、以下の説明において、マークM1〜M4を区別しない場合には単に「マークM」と記載し、特定の1つを指す場合には「マークM1」などと記載する。また、説明の便宜上、各マークMはセンサシート11上の1つの座標点に対応する大きさであるものとする。 First, correction regarding the position of the sheet 31 with respect to the sensor sheet 11 will be described. FIG. 4A shows a state in which the sheet 31 is disposed on the sensor sheet 11. As illustrated, the sheet 31 is provided with marks M1 to M4 at four corners. In the following description, when the marks M1 to M4 are not distinguished from one another, they are simply described as "mark M", and when referring to a specific one, they are described as "mark M1" or the like. Further, for convenience of explanation, each mark M has a size corresponding to one coordinate point on the sensor sheet 11.
マークMは、導電物質からなり、例えば導電性インクにより用紙31に形成されるので、用紙31をセンサシート11上に配置すると、入力装置10はマークMのセンサシート11上における位置座標を検出することができる。 The mark M is made of a conductive material and is formed on the sheet 31 by, for example, a conductive ink. Therefore, when the sheet 31 is disposed on the sensor sheet 11, the input device 10 detects the position coordinates of the mark M on the sensor sheet 11. be able to.
図4(A)において、センサシート11の左下隅を原点(以下、「センサ原点」と呼ぶ。)Osとし、センサシート11の下辺と左辺をそれぞれX軸、Y軸とする座標系(以下、「センサ座標系」とも呼ぶ。)を定義する。また、用紙31の左下隅を原点(以下、「紙原点」と呼ぶ。)Opとし、用紙31の下辺と左辺をそれぞれx軸、y軸とする座標系(以下、「紙座標系」とも呼ぶ。)を定義する。 In FIG. 4A, a lower left corner of the sensor sheet 11 is referred to as an origin (hereinafter referred to as a “sensor origin”) Os, and a coordinate system (hereinafter referred to as an X axis and a Y axis) Define also as “Sensor coordinate system”. A coordinate system in which the lower left corner of the sheet 31 is an origin (hereinafter referred to as "paper origin") Op and the lower side and the left side of the sheet 31 are x and y axes (hereinafter referred to as "paper coordinate system") Define.).
いま、図4(A)のように用紙31をセンサシート11上のある位置に置いたとする。なお、この例では、用紙31の4辺がセンサシート11の対応する4辺とほぼ平行であるものとする。センサシート11は用紙31の4つのマークM1〜M4を検出し、制御部16はマークM1〜M4のセンサ座標系における位置座標を取得する。ここで、図4(A)に示すように、紙原点Opの位置座標がOp(a,b)であると仮定すると、制御部16はマークM1の位置座標を紙原点Opの位置座標として取得する。この場合、ペン32による記入位置のセンサ座標系における位置座標をP(X,Y)とすると、その記入位置の紙座標系における位置座標p(x,y)は以下の式で与えられる。 Now, as shown in FIG. 4A, it is assumed that the sheet 31 is placed at a certain position on the sensor sheet 11. In this example, it is assumed that the four sides of the sheet 31 are substantially parallel to the corresponding four sides of the sensor sheet 11. The sensor sheet 11 detects four marks M1 to M4 of the sheet 31, and the control unit 16 acquires positional coordinates of the marks M1 to M4 in the sensor coordinate system. Here, assuming that the position coordinate of the paper origin Op is Op (a, b) as shown in FIG. 4A, the control unit 16 acquires the position coordinate of the mark M1 as the position coordinate of the paper origin Op Do. In this case, assuming that the position coordinates of the writing position by the pen 32 in the sensor coordinate system are P (X, Y), the position coordinates p (x, y) of the writing position in the paper coordinate system are given by the following equation.
p(x,y)=P(X−a,Y−b) (1)
このように、用紙31に設けられたマークM1の位置を検出して紙原点Opのセンサ座標系における位置座標を取得することにより、センサ座標系における記入位置を紙座標系における記入位置に変換することができる。また、ユーザが記入を続ける間に用紙31が徐々に上下左右の方向にずれていったとしても、マークM1の位置を継続的に検出して式(1)による変換を行うことにより、入力装置10は常に紙座標系における記入位置を正しく取得することが可能となる。
p (x, y) = P (Xa, Yb) (1)
As described above, the writing position in the sensor coordinate system is converted to the writing position in the paper coordinate system by detecting the position of the mark M1 provided on the paper 31 and acquiring the position coordinates of the paper origin Op in the sensor coordinate system. be able to. Also, even if the paper 31 is gradually shifted in the vertical and horizontal directions while the user continues writing, the position of the mark M1 is continuously detected and conversion is performed by the equation (1), thereby the input device 10 always makes it possible to correctly obtain the entry position in the paper coordinate system.
なお、用紙31がセンサシート11上に配置されると、センサシート11は4つのマークM1〜M4に対応する4つの位置座標を検出するが、制御部16は、検出された4つの位置座標のうち最もセンサ原点Osに近い位置座標をマークM1の位置座標であると判定すればよい。 When the sheet 31 is placed on the sensor sheet 11, the sensor sheet 11 detects four positional coordinates corresponding to the four marks M1 to M4, but the control unit 16 detects the four positional coordinates detected. Among them, position coordinates closest to the sensor origin Os may be determined to be position coordinates of the mark M1.
次に、用紙31の傾きに関する補正について説明する。図4(B)は、用紙31がセンサシート11の下辺に対して反時計まわりに傾きθだけ傾いて配置された状態を示す。なお、センサ座標系、紙座標系などの定義は図4(A)と同様であるとする。 Next, correction regarding the inclination of the sheet 31 will be described. FIG. 4B shows a state in which the sheet 31 is disposed counterclockwise with respect to the lower side of the sensor sheet 11 and inclined by θ. Note that definitions of the sensor coordinate system, the paper coordinate system, and the like are assumed to be the same as those in FIG.
センサシート11は用紙31の4つのマークM1〜M4を検出し、制御部16はマークM1〜M4のセンサ座標系における位置座標を取得する。ここで、図4(B)に示すように、マークM1のセンサ座標系における位置座標、即ち紙原点Opの座標がOp(a,b)であり、マークM2のセンサ座標系における座標が(c,d)であったとすると、傾きθは、下式で与えられる。 The sensor sheet 11 detects four marks M1 to M4 of the sheet 31, and the control unit 16 acquires positional coordinates of the marks M1 to M4 in the sensor coordinate system. Here, as shown in FIG. 4B, position coordinates of the mark M1 in the sensor coordinate system, that is, coordinates of the paper origin Op are Op (a, b), and coordinates of the mark M2 in the sensor coordinate system are (c , D), the inclination θ is given by the following equation.
θ=tan−1{(d−b)/(c−a)} (2)
よって、制御部16は、式(1)により得られた紙座標系における記入位置を時計回りに角度θ回転させることにより、傾きθを考慮した正しい記入位置を得ることができる。
θ = tan −1 {(d−b) / (c−a)} (2)
Therefore, the control unit 16 can obtain the correct writing position in consideration of the inclination θ by rotating the writing position in the paper coordinate system obtained by the equation (1) clockwise by the angle θ.
このように、用紙31に設けられたマークM1、M2の位置を検出して用紙31の傾きθを算出することにより、用紙31が傾いていても、正しい記入位置を取得することができる。また、ユーザが記入を続ける間に用紙31が徐々に回転していったとしても、マークM1、M2の位置を継続的に検出して傾きθを算出して補正を行うことにより、常に紙座標系における記入位置を正しく取得することが可能となる。なお、上記の例ではマークM1、M2を利用して傾きθを求めているが、マークM3、M4を用いて傾きθを求めても良い。 As described above, by detecting the positions of the marks M1 and M2 provided on the sheet 31 and calculating the inclination θ of the sheet 31, it is possible to acquire the correct writing position even if the sheet 31 is inclined. In addition, even if the sheet 31 is gradually rotated while the user continues writing, the position of the marks M1 and M2 is continuously detected, the inclination θ is calculated, and correction is always performed. It becomes possible to acquire the entry position in the system correctly. In the above example, the inclination θ is obtained using the marks M1 and M2, but the inclination θ may be obtained using the marks M3 and M4.
次に、入力装置10において記憶されるデータについて説明する。図5は、入力装置10のデータ記憶部15に記憶される記入データの例を示す。入力装置10の制御部16は、タイマー13から現在時刻を取得し、所定時間毎(図5の例では1秒毎)に記入データを記憶する。記入データは、「紙原点座標」、「傾き」、「センサ座標系における記入座標」、「紙座標系における記入座標」を含む。「紙原点座標」は、前述のように紙原点Opのセンサ座標系における座標である。「傾き」はセンサシート11の下辺、即ちセンサ座標系のX軸に対する用紙31の下辺の傾きθである。なお、制御部16は、前述のように、センサシート11によりマークM1〜M4のセンサ座標系における位置座標を検出し、これらに基づいて紙原点座標Op及び傾きθを算出して記憶する。 Next, data stored in the input device 10 will be described. FIG. 5 shows an example of the entry data stored in the data storage unit 15 of the input device 10. The control unit 16 of the input device 10 acquires the current time from the timer 13 and stores the entry data every predetermined time (every second in the example of FIG. 5). The entry data includes "paper origin coordinates", "inclination", "entry coordinates in sensor coordinate system", and "entry coordinates in paper coordinate system". The “paper origin coordinates” are coordinates in the sensor coordinate system of the paper origin Op as described above. The “inclination” is the inclination θ of the lower side of the sensor sheet 11, that is, the lower side of the sheet 31 with respect to the X axis of the sensor coordinate system. As described above, the control unit 16 detects the position coordinates of the marks M1 to M4 in the sensor coordinate system by the sensor sheet 11, and calculates and stores the paper origin coordinates Op and the inclination θ based on these.
「センサ座標系における記入座標」はセンサシート11上におけるペン32の位置座標である。また、「紙座標系における記入座標」は用紙31におけるペン32による記入位置の座標であり、前述のように、センサ座標系における記入座標に対して、紙原点座標と傾きを用いた位置補正を行うことにより求められる。そして、入力装置10は、手書き入力情報として、「紙座標系における記入座標」を端末装置20へ送信する。端末装置20は、受信した手書き入力情報を表示部21に表示する。 The “input coordinates in the sensor coordinate system” is position coordinates of the pen 32 on the sensor sheet 11. In addition, “an entry coordinate in the paper coordinate system” is a coordinate of an entry position by the pen 32 on the sheet 31, and as described above, position correction using a paper origin coordinate and an inclination with respect to the entry coordinate in the sensor coordinate system It is obtained by doing. Then, the input device 10 transmits “writing coordinates in the paper coordinate system” to the terminal device 20 as handwriting input information. The terminal device 20 displays the received handwritten input information on the display unit 21.
なお、図5には示していないが、入力装置10の制御部16は、各時刻において検出したマークM1〜M4の座標も記入データに加えてデータ記憶部15に記憶することとしてもよい。 Although not shown in FIG. 5, the control unit 16 of the input device 10 may store the coordinates of the marks M1 to M4 detected at each time in the data storage unit 15 in addition to the entry data.
次に、位置補正の処理について説明する。図6は、位置補正のフローチャートである。この処理は、主として入力装置10の制御部16により実行される。 Next, the process of position correction will be described. FIG. 6 is a flowchart of position correction. This process is mainly executed by the control unit 16 of the input device 10.
まず、制御部16は、センサシート11の出力に基づいて、ペン32による手書き入力が行われているか否かを判定する(ステップS10)。ペン32による入力が無い場合(ステップS10;No)、処理は終了する。 First, based on the output of the sensor sheet 11, the control unit 16 determines whether handwriting input is being performed by the pen 32 (step S10). If there is no input by the pen 32 (step S10; No), the process ends.
一方、ペン32による入力が行われている場合(ステップS10;Yes)、制御部16はペン32の位置座標を検出する(ステップS11)。この位置座標は、センサ座標系における記入座標に相当し、図5に示すようにデータ記憶部15に記憶される。 On the other hand, when the input by the pen 32 is performed (step S10; Yes), the control unit 16 detects the position coordinates of the pen 32 (step S11). The position coordinates correspond to the entry coordinates in the sensor coordinate system, and are stored in the data storage unit 15 as shown in FIG.
次に、制御部16は、センサシート11からの出力に基づいて、マークMの位置座標を検出する(ステップS12)。次に、制御部16は、前述の方法により、マークMの基準となる位置座標に基づいて紙原点座標Op及び傾きθを算出する(ステップS13)。算出された紙原点座標Op及び傾きθは、図5に示すようにデータ記憶部15に記憶される。 Next, the control unit 16 detects the position coordinates of the mark M based on the output from the sensor sheet 11 (step S12). Next, the control unit 16 calculates the paper origin coordinates Op and the inclination θ based on the position coordinates as a reference of the mark M by the above-mentioned method (step S13). The calculated paper origin coordinate Op and inclination θ are stored in the data storage unit 15 as shown in FIG.
次に、制御部16は、前述のように紙原点座標Op及び傾きθに基づいてセンサ座標系における記入座標を補正し、紙座標系における記入座標を算出する(ステップS14)。算出された紙座標系における記入座標は、図5に示すようにデータ記憶部15に記憶される。そして、制御部16は、通信部12を介して、紙座標系における記入座標を手書き入力情報として端末装置20へ送信し(ステップS15)、ステップS10へ戻る。 Next, the control unit 16 corrects the writing coordinates in the sensor coordinate system based on the paper origin coordinates Op and the inclination θ as described above, and calculates the writing coordinates in the paper coordinate system (step S14). The calculated entry coordinates in the paper coordinate system are stored in the data storage unit 15 as shown in FIG. Then, the control unit 16 transmits the input coordinates in the paper coordinate system as handwriting input information to the terminal device 20 via the communication unit 12 (step S15), and returns to step S10.
こうして、ペン32による手書き入力が続いている間は、ステップS11〜S15の処理が繰り返し実行され、紙座標系における記入座標が手書き入力情報として端末装置20へ送信されて表示部21に表示される。この間にセンサシート11上における用紙31の位置が徐々にずれていったとしても、制御部16は常に紙原点座標Op及び傾きθを更新しつつ紙座標系における記入座標を算出するので、端末装置20の表示部21には常に正しい位置及び向きで手書き入力情報が表示される。 Thus, while the handwriting input by the pen 32 continues, the processes of steps S11 to S15 are repeatedly executed, and the entry coordinates in the paper coordinate system are transmitted to the terminal device 20 as handwriting input information and displayed on the display unit 21. . During this time, even if the position of the sheet 31 on the sensor sheet 11 gradually shifts, the control unit 16 always calculates the entry coordinates in the sheet coordinate system while updating the sheet origin coordinates Op and the inclination θ. The handwritten input information is always displayed on the display unit 21 at the correct position and orientation.
[マークの形成方法]
図7は、用紙31にマークMを形成する方法の例を示す。図7(A)の例では、用紙31の表面に導電性インクを塗布することによりマークMを形成している。図7(B)の例では、用紙31に導電性インクを染み込ませることによりマークMを形成している。また、図7(C)の例では、2枚の用紙を重ね合せて用紙31を構成し、2枚の用紙の間に導電性インクを挟み込むことによりマークMを形成している。
[Formation method of mark]
FIG. 7 shows an example of a method of forming the mark M on the sheet 31. As shown in FIG. In the example of FIG. 7A, the mark M is formed by applying the conductive ink to the surface of the sheet 31. In the example of FIG. 7B, the mark M is formed by impregnating the paper 31 with the conductive ink. Further, in the example of FIG. 7C, the sheet M is formed by overlapping two sheets of paper, and the conductive ink is sandwiched between the two sheets of paper to form the mark M.
本実施例では、上記の方法のいずれを適用してもよい。また、センサシート11で検知できる程度の導電性を持たせることができれば、上記以外の方法でマークMを形成してもよく、紙に金属片を配置する方法などを用いることが可能である。また、用紙への記入開始時にユーザが予め4隅などに印刷されたチェックボックス内に導電性のペンなどを用いて記入することでそれをマークMとして使用することも可能である。その際にはチェックボックス内に記入される記号を特定の形状として記憶しておき、ユーザにその上をなぞることを促すように薄い色で当該形状を印刷しておくことが好ましい。このようにすることで当該形状をOCRなどを用いて認識し、マークMを使用時に都度形成し、且つ特定することが可能となる。また、マークMの形状としては裏表が判別可能なように配置位置を異ならせたり、形状自体が表裏で非対称となるものが好ましい。 Any of the methods described above may be applied in this embodiment. In addition, as long as the conductivity can be detected by the sensor sheet 11, the mark M may be formed by a method other than the above, and it is possible to use a method of arranging metal pieces on paper. It is also possible to use the mark M as a mark by using a conductive pen or the like in a check box printed in advance at four corners or the like when the user starts writing on a sheet. At that time, it is preferable to store the symbol to be entered in the check box as a specific shape, and to print the shape in a light color so as to prompt the user to trace it. By doing so, the shape can be recognized using an OCR or the like, and the mark M can be formed and identified each time of use. Further, as the shape of the mark M, it is preferable that the arrangement position is made different so that the front and back can be distinguished, or the shape itself is asymmetrical on the front and back.
[マークの配置例]
上記の実施例では、図4に示すように4つのマークMを用紙31の四隅に形成しているが、マークの位置はこれには限られない。他のマークの配置例を図8に示す。
[Example of mark placement]
In the above embodiment, as shown in FIG. 4, four marks M are formed at the four corners of the sheet 31, but the positions of the marks are not limited to this. Another arrangement example of the marks is shown in FIG.
図8(A)は、4つのマークMを、用紙31の四隅よりも内側に形成した例である。この場合、入力装置10の制御部16は、用紙31の隅からの各マークMのずれ分を考慮して紙座標原点Op及び傾きθを算出する。 FIG. 8A shows an example in which four marks M are formed inside the four corners of the sheet 31. In this case, the control unit 16 of the input device 10 calculates the sheet coordinate origin Op and the inclination θ in consideration of the deviation of each mark M from the corner of the sheet 31.
図8(B)、(C)は、さらに図中の右側の2つのマークMの上下方向の位置を、左側の2つのマークMと異ならせた例であり、用紙31の左右の中心線に対してマークMを非対称に形成している。また、図8(D)は、右側のマークMを1つにした例であり、同様に用紙31の左右の中心線に対してマークMを非対称に形成している。このように、用紙31の中心線に対してマークMを非対称に形成することにより、用紙31の表面と裏面とを識別することが可能となる。即ち、記入装置10の制御部16は、検出した複数のマークMの相対的な位置関係に基づいて、用紙31の表面と裏面のいずれに対して手書き入力がなされているかを判別することができる。 FIGS. 8B and 8C show an example in which the vertical positions of the two marks M on the right side in the figure are different from the two marks M on the left side. In contrast, the mark M is formed asymmetrically. Further, FIG. 8D shows an example in which the mark M on the right side is one, and similarly, the mark M is formed asymmetrically with respect to the left and right center lines of the sheet 31. As described above, by forming the mark M asymmetrically with respect to the center line of the sheet 31, it is possible to distinguish the front surface and the back surface of the sheet 31. That is, based on the relative positional relationship between the plurality of marks M detected, the control unit 16 of the writing device 10 can determine which of the front surface and the back surface of the sheet 31 the handwriting input has been made. .
また、用紙31にマークMを設ける形態によって、用紙の種類を判別できるようにしてもよい。即ち、用紙31の種類に応じて用紙31に形成するマークMの形態を変える。具体的に、1つの方法では、用紙31の種類に応じて個々のマークMの形状を変える。例えば、用紙A(種類A)の用紙31には三角形のマークMを設け、用紙B(種類B)の用紙31には四角形のマークMを設ける。別の方法では、用紙31の種類に応じて複数のマークMの位置関係に変える。例えば、用紙Aには4つのマークMをそれらが長方形を構成するように形成し、用紙Bには3つのマークMをそれらが三角形を構成するように形成する。また、上記の2つの方法を組み合わせ、個々のマークMの形状と複数のマークが構成する形状の組み合わせにより用紙31の種類を区別してもよい。例えば、用紙Aには4つの三角形のマークMをそれらが四角形を構成するように形成し、用紙Bには4つの四角形のマークをそれらが四角形を構成するように配置する。これにより、マークMの形態に基づいて、用紙の種類を判別することが可能となる。なお、複数のマークMの形態に基づいて用紙31の種類を判別する処理は、記入装置10と端末装置20のいずれが行っても良い。即ち、記入装置10の制御部16が複数のマークMの情報に基づいて用紙の種類を判別し、その結果を端末装置20に送信してよい。その代わりに、端末装置20の制御部23が記入装置10から複数のマークMに関する情報を受信して用紙の種類を判別しても良い。 Further, the type of the sheet may be determined by providing the mark M on the sheet 31. That is, the form of the mark M formed on the sheet 31 is changed according to the type of the sheet 31. Specifically, in one method, the shapes of the individual marks M are changed according to the type of the sheet 31. For example, a triangular mark M is provided on the sheet 31 of the sheet A (type A), and a square mark M is provided on the sheet 31 of the sheet B (type B). In another method, the positional relationship of the plurality of marks M is changed according to the type of the sheet 31. For example, four marks M are formed on sheet A so that they form a rectangle, and three marks M are formed on sheet B such that they form a triangle. In addition, the above two methods may be combined to distinguish the type of the sheet 31 by the combination of the shape of each mark M and the shape formed by a plurality of marks. For example, four triangular marks M are formed on the sheet A so that they form a square, and four square marks are arranged on the sheet B such that they form a square. This makes it possible to determine the type of paper based on the form of the mark M. The process of determining the type of the sheet 31 based on the form of the plurality of marks M may be performed by either the writing device 10 or the terminal device 20. That is, the control unit 16 of the writing device 10 may determine the type of sheet based on the information of the plurality of marks M, and may transmit the result to the terminal device 20. Instead, the control unit 23 of the terminal device 20 may receive information on the plurality of marks M from the writing device 10 to determine the type of paper.
さらには、上記のように用紙の種類が判別できた場合に、端末装置20の制御部23が用紙の種類ごとに予め設定されたアプリケーションを自動的に起動するようにしてもよい。例えば、使用中の用紙31が用紙Aと判定された場合には、端末装置20の制御部23はアプリケーションAを起動し、使用中の用紙31が用紙Bと判定された場合には、端末装置20の制御部23はアプリケーションBを起動する。なお、用紙の種類とアプリケーションとの対応関係は端末装置20の図示しない記憶部などに記憶しておけばよい。 Furthermore, when the type of sheet can be determined as described above, the control unit 23 of the terminal device 20 may automatically start the application set in advance for each type of sheet. For example, when the sheet 31 in use is determined to be sheet A, the control unit 23 of the terminal device 20 starts the application A, and when the sheet 31 in use is determined to be sheet B, the terminal device The twenty control units 23 activate the application B. The correspondence between the sheet type and the application may be stored in a storage unit (not shown) of the terminal device 20 or the like.
[記入装置の変形例]
図9は、変形例に係る記入装置10xの断面図である。この記入装置10xでは、センサシート11の上下をアクリルなどの透明樹脂17により覆っている。これにより、入力装置10のセンサシート11の部分がある程度の可撓性を有するようになり、例えば下敷きのように本に挟んで利用することが可能となる。
[Modification of writing device]
FIG. 9 is a cross-sectional view of a writing device 10x according to a modification. In the writing device 10x, the upper and lower sides of the sensor sheet 11 are covered with a transparent resin 17 such as acrylic. Thereby, the part of the sensor sheet 11 of the input device 10 comes to have a certain degree of flexibility, and it becomes possible to use it in a book, for example, as underlay.
[変形例]
上記の実施例では、ユーザがペン32により用紙31に記入できるようにしているが、記入した事項を修正したい場合には、消しゴムを利用できるようにしてもよい。具体的には、通常の消しゴムの素材に導電性を有する材料を含ませておく。この消しゴムで用紙上の削除したい箇所をこすれば、鉛筆などにより用紙に記入した事項は通常の消しゴムの機能により消去される。一方、センサシート11は、消しゴムに含まれている導電性材料を検知して消しゴムが移動した範囲を消去範囲として検出し、制御部16はデータ記憶部15に記憶されている記入データのうち消去範囲に属するものを消去すればよい。消去範囲に属する部分が消去された後の記入データを端末装置20に再送すれば、端末装置20に表示された画像において消去を反映することができる。
[Modification]
In the above embodiment, the user can write on the sheet 31 with the pen 32. However, if it is desired to correct the written matter, an eraser may be used. Specifically, a material having conductivity is included in a normal eraser material. If the portion on the sheet to be deleted is rubbed with this eraser, the items entered on the sheet with a pencil or the like will be erased by the normal function of the eraser. On the other hand, sensor sheet 11 detects the conductive material contained in the eraser and detects the range in which the eraser has moved as the erase range, and control unit 16 erases the entry data stored in data storage unit 15 What belongs to the range may be deleted. If the entry data after the portion belonging to the erasure range is erased is resent to the terminal device 20, the erasure can be reflected in the image displayed on the terminal device 20.
もしくは、制御部16は、消去範囲を示すデータを消去データとして、記入データとは別にデータ記憶部15に記憶しておいてもよい。この場合には、消去データを端末装置20に送信し、消去データが示す消去範囲を端末装置20が無記入状態に変更することにより、端末装置20に表示された画像において消去を反映することができる。 Alternatively, the control unit 16 may store data indicating the erasure range as erasure data separately from the entry data in the data storage unit 15. In this case, the erasure data is transmitted to the terminal device 20, and the erasure displayed in the terminal device 20 can be reflected by changing the erasure range indicated by the erasure data to the blank state. it can.
10、10x 手書き入力装置
11 センサシート
15 データ記憶部
16 制御部
20 端末装置
31 用紙
32 ペン
M マーク
10, 10x handwriting input device 11 sensor sheet 15 data storage unit 16 control unit 20 terminal device 31 paper 32 pen M mark
Claims (8)
前記用紙は、予め決められた異なる位置に複数のチェックボックスが設けられており、各チェックボックス内には所定形状のマークが印刷されており、
前記入力装置は、
静電容量の変化を検知するセンサシートと、
前記センサシートの接触位置における静電容量の変化を検出することにより、入力情報を検出する入力情報検出手段と、
前記センサシート上に配置された用紙のチェックボックス内に導電性のインクにより記入された前記所定形状の複数のマークの位置を検出するマーク検出手段と、
前記複数のマークの位置に基づいて、前記センサシート上に配置された用紙のセンサシートに対する位置及び傾きを検出する配置状態検出手段と、
検出された位置及び傾きに基づいて、前記入力情報を補正して出力する補正手段と、
を備えることを特徴とする手書き入力装置。 A handwriting input device comprising a sheet and an input device, wherein
The sheet is provided with a plurality of check boxes at different positions determined in advance, and a mark of a predetermined shape is printed in each check box,
The input device is
A sensor sheet that detects a change in capacitance ;
Input information detection means for detecting input information by detecting a change in capacitance at a contact position of the sensor sheet;
Mark detection means for detecting the positions of a plurality of marks of the predetermined shape entered with conductive ink in a paper check box disposed on the sensor sheet;
An arrangement state detection unit configured to detect the position and the inclination of the sheet placed on the sensor sheet with respect to the sensor sheet based on the positions of the plurality of marks;
A correction unit that corrects and outputs the input information based on the detected position and inclination;
A handwriting input device comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015033045A JP6528450B2 (en) | 2015-02-23 | 2015-02-23 | Handwriting input device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015033045A JP6528450B2 (en) | 2015-02-23 | 2015-02-23 | Handwriting input device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016157180A JP2016157180A (en) | 2016-09-01 |
JP6528450B2 true JP6528450B2 (en) | 2019-06-12 |
Family
ID=56826052
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015033045A Expired - Fee Related JP6528450B2 (en) | 2015-02-23 | 2015-02-23 | Handwriting input device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6528450B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101853056B1 (en) * | 2016-10-20 | 2018-05-04 | 주식회사 디폼아이앤티 | Apparatus for recognizing writing applied to the portable device and system including the same |
WO2019127162A1 (en) * | 2017-12-27 | 2019-07-04 | 深圳市柔宇科技有限公司 | Handwriting input apparatus and control method therefor |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5737740A (en) * | 1994-06-27 | 1998-04-07 | Numonics | Apparatus and method for processing electronic documents |
JPH0876907A (en) * | 1994-09-02 | 1996-03-22 | Wacom Co Ltd | Menu sheet for digitizer and its identification method |
JP4876718B2 (en) * | 2006-05-31 | 2012-02-15 | カシオ計算機株式会社 | Electronic paper recorder |
EP2077484A1 (en) * | 2006-10-24 | 2009-07-08 | Newcom, Inc. | Operating tool with conductor piece |
CN107273021A (en) * | 2010-11-22 | 2017-10-20 | 株式会社Ip舍路信 | Information input system, program, medium |
JP6009900B2 (en) * | 2012-10-16 | 2016-10-19 | シャープ株式会社 | Pen-type input device and portable terminal equipped with the same |
JP6045962B2 (en) * | 2013-04-02 | 2016-12-14 | アルプス電気株式会社 | Input device and electronic apparatus using the same |
CN105308545B (en) * | 2013-06-28 | 2019-09-13 | 索尼公司 | Substrate body |
-
2015
- 2015-02-23 JP JP2015033045A patent/JP6528450B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2016157180A (en) | 2016-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5422724B1 (en) | Electronic apparatus and drawing method | |
US8823774B2 (en) | Apparatus and method for processing digital image | |
US10698553B2 (en) | Writing input device | |
JP2015001751A (en) | Handwriting input device, control program and control method | |
US9886107B2 (en) | Information processing apparatus, information processing method, and program | |
US20150346886A1 (en) | Electronic device, method and computer readable medium | |
JP6359862B2 (en) | Touch operation input device, touch operation input method, and program | |
KR101312018B1 (en) | Electronic Board System and Drive Method of the Same | |
JP6528450B2 (en) | Handwriting input device | |
CN110377214B (en) | Angle detection method and angle detection device | |
US10620819B2 (en) | Display apparatus and controlling method thereof | |
WO2020253720A1 (en) | Nano paper and preparation method, method for image processing and electronic device | |
KR20130123691A (en) | Method for inputting touch input and touch display apparatus thereof | |
JP6045962B2 (en) | Input device and electronic apparatus using the same | |
JP2010055322A (en) | Handwriting input system | |
JP6540223B2 (en) | Handwriting input device | |
JP6497266B2 (en) | Erase medium and handwriting input system | |
JP2015230497A (en) | Input display device | |
JP5119834B2 (en) | Handwriting input system | |
JP2014109922A (en) | Electronic blackboard | |
JP6183111B2 (en) | Rearrangement device and program | |
JP5262761B2 (en) | Handwriting input system | |
KR101229296B1 (en) | Touch screen for handwriting recognition | |
JP2019023920A (en) | Input display device | |
JP6825438B2 (en) | Input device, image forming device and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180831 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180918 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181102 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190429 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6528450 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |