JP6549776B2 - Input display - Google Patents

Input display Download PDF

Info

Publication number
JP6549776B2
JP6549776B2 JP2018193130A JP2018193130A JP6549776B2 JP 6549776 B2 JP6549776 B2 JP 6549776B2 JP 2018193130 A JP2018193130 A JP 2018193130A JP 2018193130 A JP2018193130 A JP 2018193130A JP 6549776 B2 JP6549776 B2 JP 6549776B2
Authority
JP
Japan
Prior art keywords
pen
input
display device
handwriting input
handwriting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018193130A
Other languages
Japanese (ja)
Other versions
JP2019023920A (en
Inventor
藤井 孝文
孝文 藤井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2018193130A priority Critical patent/JP6549776B2/en
Publication of JP2019023920A publication Critical patent/JP2019023920A/en
Application granted granted Critical
Publication of JP6549776B2 publication Critical patent/JP6549776B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Description

本発明は、入力表示装置に関し、特に、タッチパネルを備え、ペンによる手書き入力が可能な入力表示装置に関する。   BACKGROUND OF THE INVENTION Field of the Invention The present invention relates to an input display device, and more particularly to an input display device having a touch panel and capable of handwriting input with a pen.

液晶パネル等の表示装置と、タッチ操作による入力を検出可能なタッチパネルとが一体となった入力表示装置が知られている。このタッチパネルが一体となった入力表示装置は、例えば、教室やオフィスなどで電子黒板として使用される。このような入力表示装置に対しては、ユーザはペンを用いて手書き入力することが多い。   BACKGROUND There is known an input display device in which a display device such as a liquid crystal panel and a touch panel capable of detecting an input by a touch operation are integrated. The input display device integrated with the touch panel is used as an electronic blackboard in, for example, a classroom or an office. For such an input display device, the user often performs handwriting input using a pen.

ペンによる手書き入力可能な入力表示装置は、低価格が進み、上述以外の用途、例えば対面式の商談などで用いられてきている。対面式の商談では、上記入力表示装置はテーブル上に置かれた状態で用いられる。従前の入力表示装置は、該装置正面からの手書き入力を前提として設計されており、客と店員が異なる方向に向いて着座している対面式の商談では客が見えるように店員が手書き入力する際、例えば以下のようにする必要がある。すなわち、客側が正面となっていた入力表示装置の向きを店員側が正面となるように一旦変えてから手書き入力し、その後に再度客側が正面となるように入力表示装置の向きを戻す必要がある。入力表示装置の向きが変えられない場合は、入力表示装置の正面側である客側に店員が移動して手書き入力する必要がある。   An input display device capable of handwriting input with a pen has a low price and has been used for applications other than the above, for example, face-to-face business negotiations. In face-to-face business negotiations, the input display device is used while being placed on a table. The conventional input display device is designed on the premise of handwritten input from the front of the device, and the clerk inputs handwritten input so that the customer can see in the face-to-face business talk where the customer and the clerk are seated facing in different directions. For example, it is necessary to do as follows. That is, it is necessary to temporarily change the direction of the input display device, which has been fronted by the customer side, so that the clerk becomes frontal, and then input by handwriting, and then return the direction of the input display device so that the customer side becomes frontal again. . If the direction of the input display device can not be changed, it is necessary for the store clerk to move to the customer side which is the front side of the input display device for handwriting input.

特許文献1には、着座位置の異なる複数の手書き入力者が同一のタッチパネルを用いて交互に手書き文字による情報を交換する際に、手書き文字入力の運筆方向に基づいて、手書きイメージの表示方向を変えて、該表示方向を揃える入力表示装置が開示されている。   According to Patent Document 1, when a plurality of handwriting input persons having different seating positions exchange information by handwritten characters alternately using the same touch panel, the display direction of the handwritten image is displayed based on the writing direction of the handwritten character input. An input display device is disclosed that changes the display direction.

特開2011−28697号公報JP 2011-28697 A

しかし、特許文献1の入力表示装置では、該入力表示装置に対して全ての方向からの手書きイメージを所定の方向に向けて表示することができない。例えば、横側から縦書き入力された場合に、正面側から見えやすいような向きで手書きイメージを表示することができない。また、一文字のみ手書き入力された場合や図形が手書き入力された場合に、すなわち文章以外が手書き入力された際に、特許文献1の入力表示装置では運筆方向を正しく判定できないので、手書きイメージを所定の方向に向けて表示することができない可能性がある。   However, the input display device of Patent Document 1 can not display handwritten images from all directions directed to the predetermined direction on the input display device. For example, when vertical writing is input from the side, the handwritten image can not be displayed in an orientation that is easy to see from the front. Also, when only one character is handwritten input or a figure is handwritten input, that is, when other than text is handwritten input, the input display device of Patent Document 1 can not correctly determine the writing direction, so the handwritten image is specified. It may not be possible to display in the direction of.

本発明は、上述のような実情に鑑みてなされたものであり、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示する入力表示装置を提供することをその目的とする。   The present invention has been made in view of the above-described circumstances, and it is easy to see from a predetermined direction regardless of input contents or horizontal input / vertical input regardless of input direction from any direction. It is an object of the present invention to provide an input display device that displays a handwritten image based on handwriting input in an orientation.

上記課題を解決するために、本発明の第1の技術手段は、情報を表示する表示面を有する表示部と、前記表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備えた入力表示装置であって、前記表示面に対する前記ペンの角度を判定する角度判定部と、前記ペンの角度に対応した回転角度を予め記憶する回転角度記憶部と、前記ペンによる手書き入力の終了を判定する手書き入力終了判定部と、を備え、前記ペンによる手書き入力中は、前記表示面上に手書き入力されたペンの軌跡が描画されるように手書きイメージを回転させずに表示すると共に、前記ペンによる手書き入力終了後、前記ペンの角度に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示することを特徴としたものである。   In order to solve the above-mentioned subject, the 1st technical means of the present invention has an input provided with a display part which has a display surface which displays information, and a touch panel which detects handwriting input by a user's pen to the display surface. A display device, comprising: an angle determination unit that determines an angle of the pen with respect to the display surface; a rotation angle storage unit that stores in advance a rotation angle corresponding to the angle of the pen; and determining an end of handwriting input by the pen A handwriting input end determination unit for displaying the handwriting image without rotating so that the locus of the pen input by handwriting is drawn on the display surface during handwriting input by the pen; After completion of the handwriting input according to the second embodiment, the handwritten image based on the handwriting input is rotated and displayed by the rotation angle corresponding to the angle of the pen.

本発明の第2の技術手段は、第1の技術手段において、前記ペンの傾き情報を、当該ペンから受信する傾き情報受信部を備え、前記角度判定部は、前記ペンの傾き情報に基づいて、前記表示面に対する前記ペンの角度を判定することを特徴としたものである。   A second technical means of the present invention, in the first technical means, includes a tilt information receiving unit for receiving tilt information of the pen from the pen, and the angle determination unit is based on the tilt information of the pen. And determining the angle of the pen with respect to the display surface.

本発明の第3の技術手段は、第2の技術手段において、前記傾き情報は、前記ペンに備えられた加速度センサの出力に基づく情報であることを特徴としたものである。   A third technical means of the present invention is characterized in that, in the second technical means, the tilt information is information based on an output of an acceleration sensor provided on the pen.

また、本発明の第4の技術手段は、第1または第2の技術手段において、前記傾き情報は、前記ペンの軸方向がいずれの方角を向いているかを示す、ペンの方角情報であり、前記入力表示装置は、前記入力表示装置の所定の面が向いている方角を示す、入力表示装置の方角情報を取得する方角情報取得部を備え、前記角度判定部は、前記ペンの方角情報と、前記入力表示装置の方角情報と、に基づき前記表示面に対する前記ペンの角度を判定することを特徴としたものである。   Further, according to a fourth technical means of the present invention, in the first or second technical means, the tilt information is directional information of a pen indicating which direction the axial direction of the pen faces. The input display device includes a direction information acquisition unit that acquires direction information of the input display device indicating a direction in which a predetermined surface of the input display device is facing, and the angle determination unit includes direction information of the pen and And determining the angle of the pen with respect to the display surface based on the direction information of the input display device.

本発明の第5の技術手段は、第4の技術手段において、前記ペンの方角情報は、前記ペンに備えられた地磁気センサの出力に基づく情報であり、前記入力表示装置は、地磁気センサを備え、前記方角情報取得部は、前記入力表示装置の前記地磁気センサの出力に基づいて、前記入力表示装置の方角情報を取得することを特徴としたものである。   A fifth technical means of the present invention is the fourth technical means, wherein the directional information of the pen is information based on the output of the geomagnetic sensor provided to the pen, and the input display device comprises a geomagnetic sensor The direction information acquisition unit acquires direction information of the input display device based on an output of the geomagnetic sensor of the input display device.

本発明の第6の技術手段は、第1〜5のいずれか1の技術手段において、右手による手書き入力か左手による手書き入力かを判定する判定部を備え、前記右手による手書き入力と前記左手による手書き入力とでは、前記手書き入力終了後に表示する前記手書きイメージの回転角度を異ならせることを特徴としたものである。   A sixth technical means of the present invention is the first technical means according to any one of the first to fifth aspects, further comprising: a determination unit that determines whether the handwriting input is by the right hand or the handwriting input by the left hand. The handwriting input is characterized in that the rotation angle of the handwritten image displayed after the completion of the handwriting input is made different.

また、本発明の第7の技術手段は、情報を表示する表示面を有する表示部と、前記表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備え前記ペンの識別情報に対応した回転角度を記憶する回転角度記憶部と、前記ペンの識別情報を前記ペンから取得する識別情報取得部と、前記ペンによる手書き入力の終了を判定する手書き入力終了判定部と、を備え、前記ペンによる手書き入力中は、前記表示面上に手書き入力されたペンの軌跡が描画されるように手書きイメージを回転させずに表示すると共に、前記ペンによる手書き入力終了後、当該ペンから取得された識別情報に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示することを特徴としたものである。   Further, a seventh technical means of the present invention is provided with a display unit having a display surface for displaying information, and a touch panel for detecting handwriting input by a user's pen on the display surface, corresponding to the identification information of the pen The pen includes a rotation angle storage unit that stores a rotation angle, an identification information acquisition unit that acquires identification information of the pen from the pen, and a handwriting input end determination unit that determines the end of handwriting input by the pen. While the handwriting input is being performed, the handwritten image is displayed without being rotated so that the locus of the pen input in handwriting is drawn on the display surface, and after the handwriting input by the pen is completed, the identification acquired from the pen It is characterized in that the handwritten image based on the handwriting input is rotated and displayed by the rotation angle corresponding to the information.

本発明の第8の技術手段は、第1〜7のいずれか1の技術手段において、前記手書き入力終了判定部は、ユーザが前記入力表示装置からペンを離したか否かを前記タッチパネルからの出力に基づいて判定し、ユーザが前記入力表示装置からペンを離した状態で所定の時間が経過した場合に手書き入力が終了したと判定することを特徴としたものである。   The eighth technical means of the present invention is the technical means according to any one of the first to seventh aspects, wherein the handwriting input end determination unit outputs from the touch panel whether or not the user has removed the pen from the input display device. It is characterized in that it is determined that the handwriting input has ended when a predetermined time has elapsed while the user has removed the pen from the input display device.

本発明の第9の技術手段は、第1〜8のいずれか1の技術手段において、前記手書きイメージを回転させて表示する際、回転させた前記手書きイメージが前記表示面外にまで及ぶ場合、前記手書きイメージを縮小させて表示することを特徴としたものである。   In a ninth technical means of the present invention according to any one of the first to eighth technical means, when the handwritten image is rotated and displayed, the rotated handwritten image extends beyond the display surface. It is characterized in that the handwritten image is reduced and displayed.

本発明の入力表示装置によれば、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。   According to the input display device of the present invention, the handwriting image based on the handwriting input in an orientation that can be easily seen from the predetermined direction regardless of the input content or the horizontal writing input / vertical writing input, regardless of the input content from any direction Can be displayed.

本発明の実施例1の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンの一例を説明するためのブロック図である。It is a block diagram for demonstrating an example of the input display apparatus of Example 1 of this invention, and the pen used for the handwriting input with respect to this input display apparatus. 図1のペンの模式図である。It is a schematic diagram of the pen of FIG. 図1の対応表示回転角度記憶部に記憶する情報を説明する図である。It is a figure explaining the information memorize | stored in the corresponding | compatible display rotation angle memory | storage part of FIG. 図1の入力表示装置の表示画面例を示す図である。It is a figure which shows the example of a display screen of the input display apparatus of FIG. 図1の入力表示装置の表示処理を説明するフローチャートである。It is a flowchart explaining the display process of the input display apparatus of FIG. 本発明の実施例3の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンを説明するための図である。It is a figure for demonstrating the input display apparatus of Example 3 of this invention, and the pen used for the handwriting input with respect to this input display apparatus. 本発明の実施例4の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンの一例を説明するためのブロック図である。It is a block diagram for demonstrating an example of the input display apparatus of Example 4 of this invention, and a pen used for the handwriting input with respect to this input display apparatus. 図7の対応表示回転角度記憶部に記憶する情報の一例を説明する図である。It is a figure explaining an example of the information memorize | stored in the corresponding | compatible display rotation angle memory | storage part of FIG. 図7の入力表示装置の表示処理を説明するフローチャートである。It is a flowchart explaining the display process of the input display apparatus of FIG.

以下、図面を参照しながら、本発明の表示装置の好適な実施形態について説明する。なお、以下の発明において、異なる図面においても同じ符号を付した構成は同様のものであるとして、その説明を省略する。   Hereinafter, preferred embodiments of the display device of the present invention will be described with reference to the drawings. In addition, in the following invention, the description which abbreviate | omits the description as the structure which attached | subjected the same code | symbol also in different drawings is the same.

(実施例1)
図1は、本発明の実施例1の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンの一例を説明するためのブロック図である。図2は、図1のペンの外形の模式図である。
Example 1
FIG. 1 is a block diagram for explaining an example of an input display device according to a first embodiment of the present invention and a pen used for handwriting input to the input display device. FIG. 2 is a schematic view of the outline of the pen of FIG.

入力表示装置1は、図1に示すように、制御部10、表示部11、タッチパネル12、画面制御部13、通信部14、角度判定部15及び対応表示回転角度記憶部16aを備える。以下の説明では、入力表示装置1が、表示部11の表示面が水平となるような状態で用いられるものとする。   As shown in FIG. 1, the input display device 1 includes a control unit 10, a display unit 11, a touch panel 12, a screen control unit 13, a communication unit 14, an angle determination unit 15, and a corresponding display rotation angle storage unit 16a. In the following description, it is assumed that the input display device 1 is used in a state in which the display surface of the display unit 11 is horizontal.

制御部10は、CPU(Central Processing Unit)等から構成されるもので、入力表示装置1全体を制御する。
表示部11は、例えば液晶表示パネルから構成されるもので、手書き入力を含むユーザ入力に基づく表示画面を表示面に表示する。
タッチパネル12は、表示部11の表示面を覆うように設けられ該表示面に対するユーザのタッチ入力を検出する。本例では、タッチパネル12は投影型静電容量方式のタッチパネルであるものとする。
画面制御部13は、表示部11の表示面に表示する表示画面を制御する。
通信部14は、Bluetooth(登録商標)やZigBee(登録商標)などによりペン2と通信するものである。この通信部14は、ペン2の傾き情報を該ペン2より受信する「傾き情報受信部」である。
The control unit 10 is configured by a CPU (Central Processing Unit) or the like, and controls the entire input display device 1.
The display unit 11 includes, for example, a liquid crystal display panel, and displays a display screen based on user input including handwriting input on the display surface.
The touch panel 12 is provided so as to cover the display surface of the display unit 11 and detects a user's touch input on the display surface. In the present example, the touch panel 12 is a projected capacitive touch panel.
The screen control unit 13 controls a display screen displayed on the display surface of the display unit 11.
The communication unit 14 communicates with the pen 2 by Bluetooth (registered trademark) or ZigBee (registered trademark). The communication unit 14 is a “tilt information receiving unit” that receives tilt information of the pen 2 from the pen 2.

ここで、ペン2について説明する。
ペン2は、制御部20、通信部21、接触検出部22、傾き情報取得部23を備える。ペン2のペン先には導電性チップが用いられており、ペン先が入力表示装置1のタッチパネル12に触れたときにタッチパネル12が検出可能となっている。
制御部20は、CPU(Central Processing Unit)等から構成されるもので、ペン2全体を制御する。
Here, the pen 2 will be described.
The pen 2 includes a control unit 20, a communication unit 21, a contact detection unit 22, and a tilt information acquisition unit 23. A conductive tip is used for the pen tip of the pen 2, and when the pen tip touches the touch panel 12 of the input display device 1, the touch panel 12 can be detected.
The control unit 20 is configured by a CPU (Central Processing Unit) or the like, and controls the entire pen 2.

通信部21は、Bluetooth(登録商標)やZigBee(登録商標)などにより入力表示装置1と通信するものである。   The communication unit 21 communicates with the input display device 1 by Bluetooth (registered trademark) or ZigBee (registered trademark).

接触検出部22は、ペン2のペン先とタッチパネル12との接触を検知できる。例えば、特開2009−288968号公報に記載のような構成を採用することで上記接触を検知できる。   The contact detection unit 22 can detect contact between the pen tip of the pen 2 and the touch panel 12. For example, the said contact can be detected by employ | adopting a structure as described in Unexamined-Japanese-Patent No. 2009-288968.

傾き情報取得部23は、ペン2の傾き情報を取得するものである。この傾き情報取得部23は、例えば、3軸加速度センサ及び地磁気センサを含み、これらセンサからの出力に基づいてペン2の軸方向がいずれの方角を向いているかを示す方角情報を傾き情報として取得し出力する。なお、ペン2の軸方向とは、図2のペン2の中心軸2aを通りペン2の先端2bから後端2cに向かう方向である。
ペン2は、接触検出部22によって該ペン2のペン先とタッチパネル12との接触が検知されると、傾き情報取得部23により傾き情報を取得し通信部21を介して入力表示装置1に送信する。
The tilt information acquisition unit 23 acquires tilt information of the pen 2. The tilt information acquisition unit 23 includes, for example, a 3-axis acceleration sensor and a geomagnetic sensor, and obtains, as tilt information, direction information indicating which direction the axial direction of the pen 2 faces based on outputs from these sensors Output. The axial direction of the pen 2 is a direction from the front end 2 b of the pen 2 toward the rear end 2 c through the central axis 2 a of the pen 2 in FIG. 2.
When the touch detection unit 22 detects a touch between the pen tip of the pen 2 and the touch panel 12, the pen 2 acquires tilt information by the tilt information acquisition unit 23 and transmits the tilt information to the input display device 1 via the communication unit 21. Do.

図1の入力表示装置1の説明に戻る。
入力表示装置1の角度判定部15は、通信部14を介して受信した傾き情報に基づいて、表示部11の表示面に対するペン2の角度を判定する。入力表示装置1は、不図示の地磁気センサを含み、該装置1の正面が向いている方角を検出できるようになっている。入力表示装置1の正面とは、通常表示を行った際に正方向の画像が見られる位置である。角度判定部15は、例えば、この入力表示装置1の正面が向いている方角の情報と、ペン2から傾き情報として取得したペン2の軸方向の方角情報とに基づいて、表示部11の表示面に対するペン2の角度を判定する。
The description returns to the description of the input display device 1 of FIG.
The angle determination unit 15 of the input display device 1 determines the angle of the pen 2 with respect to the display surface of the display unit 11 based on the tilt information received via the communication unit 14. The input display device 1 includes a geomagnetic sensor (not shown) so that the direction in which the front of the device 1 faces can be detected. The front of the input display device 1 is a position where an image in the positive direction can be seen when normal display is performed. The angle determination unit 15 displays the display of the display unit 11 based on, for example, the information on the direction in which the front of the input display device 1 is facing and the direction information on the axial direction of the pen 2 acquired as tilt information from the pen 2 Determine the angle of the pen 2 to the surface.

記憶部16は、HDD(Hard Disk Drive)やROM(Read Only Memory)等の記憶媒体から成り、各種情報を記憶するもので、対応表示回転角度記憶部16aを有する。
角度判定部15で判定した、表示部11の表示面に対するペン2の角度によって、ペン2を用いた手書き入力ユーザの位置する方向が推定できる。推定されるユーザの位置する方向によらず手書き入力結果の向きが表示部11の正面側から見て正方向となるようにするためには、手書き入力結果を回転して表示する必要がある。そのため、対応表示回転角度記憶部16aは、表示部11の表示面に対するペン2の角度に対応した回転角度を予め記憶する。
The storage unit 16 is formed of a storage medium such as a hard disk drive (HDD) or a read only memory (ROM), stores various information, and has a corresponding display rotation angle storage unit 16a.
Based on the angle of the pen 2 with respect to the display surface of the display unit 11 determined by the angle determination unit 15, the direction in which the handwriting input user using the pen 2 can be estimated. In order to make the direction of the handwriting input result a positive direction as viewed from the front side of the display unit 11 regardless of the direction in which the user is located, it is necessary to rotate and display the handwriting input result. Therefore, the correspondence display rotation angle storage unit 16a stores in advance the rotation angle corresponding to the angle of the pen 2 with respect to the display surface of the display unit 11.

図3は、対応表示回転角度記憶部16aに記憶する情報を説明する図である。ここでは、図3(A)の表示面11aの向き(表示面11aの正面とは反対側から該正面側に向かう方向、すなわち図の上から下に向かう方向)とペン2の軸方向が一致する場合に上記ペン2の角度を0°とし、ペン2の軸方向が反時計回り方向にずれるにしたがって、上記ペン2の角度の値は増加する。
表示面11aに対するペン2の角度が、46〜135°の場合は、手書き入力ユーザの位置が正面側の位置であることが推定され、手書き入力結果は、表示の際に回転しなくても入力結果の向きが正面側から見て正方向となる。
一方、表示面11aに対するペン2の角度が、226〜315°の場合は、手書き入力ユーザの位置が正面側とは反対側の位置であることが推定され、手書き入力結果は、表示の際に180°回転すると入力結果の向きが正面側から見て正方向となる。
FIG. 3 is a diagram for explaining the information stored in the corresponding display rotation angle storage unit 16a. Here, the direction of the display surface 11a in FIG. 3A (the direction from the opposite side to the front side of the display surface 11a toward the front side, ie, the direction from the top to the bottom of the figure) coincides with the axial direction of the pen 2 In this case, the angle of the pen 2 is set to 0 °, and the value of the angle of the pen 2 increases as the axial direction of the pen 2 shifts counterclockwise.
When the angle of the pen 2 with respect to the display surface 11a is 46 to 135 °, it is estimated that the position of the handwriting input user is the position on the front side, and the handwriting input result is input even if it is not rotated at the time of display The direction of the result is positive as viewed from the front side.
On the other hand, when the angle of the pen 2 with respect to the display surface 11a is 226 to 315 °, it is estimated that the position of the handwriting input user is the position opposite to the front side, and the handwriting input result is displayed When rotated 180 °, the direction of the input result is positive as viewed from the front side.

また、表示面11aに対するペン2の角度が、136〜225°の場合は、手書き入力ユーザの位置が正面側から見て右側の位置であることが推定され、手書き入力結果は、表示の際に時計回りに90°回転すると入力結果の向きが正面側から見て正方向となる。
さらに、表示面11aに対するペン2の角度が、316〜360°や0〜45°の場合は、手書き入力ユーザの位置が正面側から見て左側の位置であることが推定され、手書き入力結果は、表示の際に反時計回りに90°回転すると入力結果の向きが正面側から見て正方向となる。
When the angle of the pen 2 with respect to the display surface 11a is 136 to 225 °, it is estimated that the position of the handwriting input user is the right position when viewed from the front side, and the handwriting input result is displayed When rotated 90 ° clockwise, the direction of the input result is positive as viewed from the front side.
Furthermore, when the angle of the pen 2 with respect to the display surface 11a is 316 to 360 ° or 0 to 45 °, it is estimated that the position of the handwriting input user is the left position when viewed from the front side. When the display is rotated 90 ° counterclockwise, the direction of the input result is positive as viewed from the front side.

対応表示回転角度記憶部16aは、表示部11の表示面に対するペン2の相対的な角度から推定される手書き入力ユーザの位置する方向によらず手書き入力結果の向きが正面側から見て正方向となるように、例えば、図3(B)のテーブルT1のように、上記ペン2の角度毎に、表示に際する手書き入力結果の回転角度を予め記憶する。   The correspondence display rotation angle storage unit 16a is configured such that the direction of the handwriting input result is positive when viewed from the front side regardless of the direction in which the handwriting input user is estimated from the relative angle of the pen 2 with respect to the display surface of the display unit 11. For example, as in the table T1 of FIG. 3B, the rotation angle of the handwriting input result in the display is stored in advance for each angle of the pen 2.

以上の各部を備える図1の入力表示装置1は、ペン2から取得された傾き情報に基づいて判定された上記ペン2の角度に対応する回転角度を、所定のタイミングで対応表示回転角度記憶部16aを参照して取得する。
そして、ペン2による手書き入力が終了すると、画面制御部13によって、ペン2による手書き入力に基づく手書きイメージを、上記取得した回転角度分回転させて表示部11に表示させる。
The input display device 1 of FIG. 1 including the above-described units corresponds to the rotation angle corresponding to the angle of the pen 2 determined based on the tilt information acquired from the pen 2 at a predetermined timing, and the display rotation angle storage unit Obtain by referring to 16a.
Then, when the handwriting input by the pen 2 is finished, the screen control unit 13 causes the display unit 11 to rotate the handwritten image based on the handwriting input by the pen 2 by the acquired rotation angle and display the same.

これにより、入力表示装置1では、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、正面側から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。   Thereby, the input display device 1 displays a handwritten image based on handwriting input in a direction that can be easily viewed from the front side, regardless of the input content or horizontal writing / vertical writing input, regardless of the input content from any direction. can do.

なお、上記ペン2の角度に対応する回転角度を取得するタイミングは、ペン2による手書き入力に基づく手書きイメージの回転表示前であればよく、ペン2による手書き入力が終了した後でもよい。   The timing of acquiring the rotation angle corresponding to the angle of the pen 2 may be before the rotation display of the handwritten image based on the handwriting input by the pen 2 and may be after the handwriting input by the pen 2 is finished.

図4は、入力表示装置1の表示画面例を示す図であり、図4(A)は、入力表示装置1の正面とは反対の逆側にいるユーザがペン2を入力表示装置1にタッチさせ手書き入力を開始した時の表示画面例、図4(B)は同手書き入力中の表示画面例、図4(C)は、同手書き入力終了後の表示画面例を示す。   FIG. 4 is a view showing an example of the display screen of the input display device 1. FIG. 4A shows that the user on the opposite side opposite to the front of the input display device 1 touches the pen 2 on the input display device 1. 4 (B) shows an example of a display screen during handwriting input, and FIG. 4 (C) shows an example of a display screen after completion of handwriting input.

入力表示装置1は、図4(A)に示すようなブランクの表示画面を表示しているときに、逆側にいるユーザからペン2用いて手書き入力が開始されると、上述のように角度判定情報をペン2から取得し、角度判定部15が該情報に基づいてペン2の角度を判定する。図の例では、ペン2の角度は240°であると判定される。また、入力表示装置1はペン2の角度の判定の他、手書き入力に応じた描画処理を開始する。描画処理に用いられた手書き入力データ(ストロークデータともいう)は、ペン2の角度の情報と共に記憶部16に記憶される。   When the input display device 1 is displaying a blank display screen as shown in FIG. 4A and the handwriting input is started by using the pen 2 from the user on the opposite side, the angle as described above Determination information is acquired from the pen 2 and the angle determination unit 15 determines the angle of the pen 2 based on the information. In the illustrated example, the angle of the pen 2 is determined to be 240 °. In addition to the determination of the angle of the pen 2, the input display device 1 starts drawing processing according to handwriting input. The handwriting input data (also referred to as stroke data) used in the drawing process is stored in the storage unit 16 together with the information on the angle of the pen 2.

入力表示装置1は、手書き入力中は、図4(B)に示すように、手書き入力に基づく手書きイメージAを一旦逆さまに表示する。
手書き入力終了後は、入力表示装置1では、図3(B)のテーブルT1を参照し、ペン2の角度に対応する回転角度を取得する。図の例では、ペン2の角度240°に対応する回転角度として180°が取得される。そして、入力表示装置1は、
記憶部16に記憶していた手書き入力データに基づいて、上述のペン2の角度に対応する180°回転させることによって、図4(C)に示すように、手書きイメージAの向きが正方向になるように表示することができる。
While the handwriting input is being performed, the input display device 1 temporarily displays the handwritten image A based on the handwriting input upside down, as shown in FIG. 4 (B).
After the end of the handwriting input, the input display device 1 refers to the table T1 of FIG. 3B and acquires a rotation angle corresponding to the angle of the pen 2. In the example of the figure, 180 degrees is acquired as a rotation angle corresponding to the angle 240 degrees of the pen 2. And, the input display device 1
Based on the handwriting input data stored in the storage unit 16, by rotating it 180 degrees corresponding to the angle of the pen 2 described above, as shown in FIG. Can be displayed as

図5は、図1の入力表示装置1の表示処理を説明するフローチャートである。
図示するように、入力表示装置1の表示画面に対してペンダウンが行われると(ステップS1)、入力表示装置1は、タッチパネル12に対するペン2の接触を検知し、傾き情報として、ペン2の軸方向がいずれの方角を向いているかを示す方角情報をペン2から通信部14を介して受信する(ステップS2)。
FIG. 5 is a flowchart for explaining display processing of the input display device 1 of FIG.
As illustrated, when the pen-down is performed on the display screen of the input display device 1 (step S1), the input display device 1 detects the touch of the pen 2 on the touch panel 12, and the axis of the pen 2 as inclination information. Direction information indicating which direction the direction is directed is received from the pen 2 via the communication unit 14 (step S2).

そして、角度判定部15が傾き情報に基づいて表示面に対するペン2の角度を判定する(ステップS3)。判定により得られた、表示面に対するペン2の角度の情報は記憶部16に記憶される。
次いで、入力表示装置1の制御部10が、タッチパネル12からの出力に基づいて、ユーザがペン2を動かしたか否か判定する(ステップS4)。
Then, the angle determination unit 15 determines the angle of the pen 2 with respect to the display surface based on the tilt information (step S3). Information on the angle of the pen 2 with respect to the display surface obtained by the determination is stored in the storage unit 16.
Next, the control unit 10 of the input display device 1 determines whether the user has moved the pen 2 based on the output from the touch panel 12 (step S4).

ユーザがペン2を動かしていた場合(YESの場合)、ペン2の軌跡が描画されるように画面制御部13にてタッチパネル12からの出力に基づいて描画処理してから(ステップS5)、ステップS6へ処理を進める。なお、描画処理に用いられた手書き入力データは、記憶部16に記憶される。
ユーザがペン2を動かしていない場合(ステップS4、NOの場合)、入力表示装置1はそのままステップS6へ処理を進める。
If the user has moved the pen 2 (in the case of YES), the screen control unit 13 performs drawing processing based on the output from the touch panel 12 so that the locus of the pen 2 is drawn (step S5), step Proceed to S6. The handwriting input data used for the drawing process is stored in the storage unit 16.
When the user has not moved the pen 2 (in the case of NO at step S4), the input display apparatus 1 proceeds the process to step S6 as it is.

ステップS6では、入力表示装置1は、ユーザが該装置1からペン2を離したか否かを、タッチパネル12からの出力に基づいて判定する。
ペン2を離していない場合(NOの場合)、入力表示装置1は処理をステップS4に戻す。ペン2を離していた場合(YESの場合)、入力表示装置1はタイムアウト時間を例えば1秒としてタイマを起動する(ステップS7)。
In step S6, the input display device 1 determines whether the user has released the pen 2 from the device 1 based on the output from the touch panel 12.
When the pen 2 is not released (in the case of NO), the input display device 1 returns the process to step S4. If the pen 2 has been released (in the case of YES), the input display device 1 activates the timer with a time-out time of, for example, one second (step S7).

次に、入力表示装置1の制御部10がタイムアウトしたか否か判定する(ステップS8)。
タイムアウトしていた場合(YESの場合)、すなわち、ペン2による手書き入力が終了していた場合、入力表示装置1は、記憶部16に記憶のペン2の角度に対応する回転角度を、対応表示回転角度記憶部16aのテーブルT1(図3参照)を参照して取得する(ステップS9)。そして、画面制御部13が手書きイメージを取得された回転角度分回転させて、元の手書きイメージに代えて表示部11に表示する(ステップS10)。
Next, it is determined whether the control unit 10 of the input display device 1 has timed out (step S8).
If timed out (in the case of YES), that is, if the handwriting input by the pen 2 has been completed, the input display device 1 displays the rotation angle corresponding to the angle of the pen 2 stored in the storage unit 16 It acquires with reference to table T1 (refer FIG. 3) of the rotation angle memory | storage part 16a (step S9). Then, the screen control unit 13 rotates the handwritten image by the acquired rotation angle, and displays the handwritten image on the display unit 11 instead of the original handwritten image (step S10).

ステップS8において、タイムアウトしていなかった場合(NOの場合)、再度ペンダウンされたか否かをタッチパネル12からの出力に基づいて判定する(ステップS11)。ペンダウンしていない場合(NOの場合)、入力表示装置1は処理をステップS8へ戻し、ペンダウンされていた場合(YESの場合)、タイマをクリアし停止してから(ステップS12)、処理をステップS4に戻す。ここでは、再度ペンダウンされた際、ペンの傾き情報の再取得を行わず、表示面に対するペン2の角度を再判定しない。タイムアウト時間内に、ユーザが場所を変更する可能性は低いためである。   If it is determined in step S8 that the timeout has not occurred (in the case of NO), it is determined based on the output from the touch panel 12 whether or not the pen is lowered again (step S11). When the pen is not down (in the case of NO), the input display device 1 returns the process to step S8, and when the pen is down (in the case of YES), the timer is cleared and stopped (step S12). Return to S4. Here, when the pen is lowered again, the tilt information of the pen is not acquired again, and the angle of the pen 2 with respect to the display surface is not redetermined. This is because the user is unlikely to change places within the timeout time.

(実施例2)
以上の例では、入力表示装置がペンの傾き情報をペンから取得し、その傾き情報に基づいて、表示面に対するペンの角度を判定していた。しかし、入力表示装置のタッチパネルに対してペン先と共にユーザの掌が触れる場合は、後述の図6のように、ペン先による入力領域R1とユーザの掌による入力領域R2とを検出し、これら入力領域R1、R2の位置関係に基づいて、表示面に対するペンの角度を判定することができる。より具体的には、例えば、上記入力領域R1の中心から入力領域R2の中心に向かう方向をペン2の軸方向とし、このペン2の軸方向に基づいて表示面に対するペンの角度を判定できる。この場合、入力表示装置には地磁気センサを設ける必要がなく、また、ペンにも3軸加速度センサ及び地磁気センサを設ける必要がないので、コストを削減することができる。
(Example 2)
In the above example, the input display device acquires pen tilt information from the pen, and determines the pen angle with respect to the display surface based on the tilt information. However, when the user's palm touches the touch panel of the input display device together with the pen tip, as shown in FIG. 6 described later, the input area R1 by the pen tip and the input area R2 by the palm of the user are detected. The angle of the pen with respect to the display surface can be determined based on the positional relationship between the regions R1 and R2. More specifically, for example, the direction from the center of the input area R1 toward the center of the input area R2 is taken as the axial direction of the pen 2, and the angle of the pen with respect to the display surface can be determined based on the axial direction of the pen 2. In this case, it is not necessary to provide the geomagnetic sensor in the input display device, and it is not necessary to provide the three-axis acceleration sensor and the geomagnetic sensor on the pen, so the cost can be reduced.

(実施例3)
図6は、本発明の実施例3の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンを説明するための図である。
実施例1は、ペンによる手書き入力の際、ユーザが右手または左手のいずれか一方を使用することを前提としたものである。
(Example 3)
FIG. 6 is a figure for demonstrating the input display apparatus of Example 3 of this invention, and the pen used for the handwriting input with respect to this input display apparatus.
The first embodiment is based on the premise that the user uses either the right hand or the left hand in handwriting input with a pen.

図6(A)及び図6(B)に示すように、入力表示装置1´の正面側からペン2´による手書き入力を行う場合でも、右手を使うか左手を使うかによってペン2´の角度は異なる。
したがって、右手による手書き入力か左手による手書き入力かを判定する判定部を入力表示装置1´に設け、右手による手書き入力と左手による手書き入力とでは、手書き入力終了後に表示する手書きイメージの回転角度を異ならせるとよい。
As shown in FIGS. 6 (A) and 6 (B), even when the handwriting input is performed by the pen 2 'from the front side of the input display device 1', the angle of the pen 2 'depends on whether the right hand or the left hand is used. Is different.
Therefore, a determination unit for determining whether handwriting input by the right hand or handwriting by the left hand is provided in the input display device 1 ′, and the handwriting input by the right hand and handwriting input by the left hand determines the rotation angle of the handwritten image to be displayed after handwriting input ends. You should make it different.

右手による手書き入力か左手による手書き入力かの判定は、例えば、以下のようにすることで行うことができる。すなわち、ペン2´にスイッチを設け、該スイッチの操作状況を所定のタイミングで入力表示装置1´に送信する。入力表示装置1´では、受信した操作状況の情報に基づいて上記判定を行うことができる。
右手/左手の判定方法は、上述の例に限られず、例えば、上述と同様のスイッチを入力表示装置1´側に設け、該スイッチの操作状況に基づいて判定してもよい。
The determination as to whether the handwriting input is performed by the right hand or the handwriting input by the left hand can be performed, for example, as follows. That is, the pen 2 'is provided with a switch, and the operation status of the switch is transmitted to the input display 1' at a predetermined timing. In the input display device 1 ′, the above determination can be performed based on the received information on the operation status.
The determination method of the right hand / left hand is not limited to the above-described example, and for example, the same switch as described above may be provided on the input display device 1 'side, and the determination may be performed based on the operation status of the switch.

なお、タッチパネルに対してペン先と共にユーザの掌が触れる場合に、掌によるタッチ入力をキャンセルしペン先によるタッチ入力のみを有効とする方法には従前の技術(例えば特開2013−8317号公報)を使用できる。また、入力領域がペン先によるものかユーザの掌によるものかは、該入力領域の面積が所定値より大きいか否かで判定することができる。   In addition, when the user's palm touches the touch panel together with the pen tip, the prior art is a method of canceling the touch input by the palm and making only the touch input by the pen tip effective (for example, JP 2013-8317). Can be used. Further, it can be determined whether the area of the input area is larger than a predetermined value or not whether the input area is the pen tip or the hand of the user.

(実施例1、3に関わる付記)
以上の例では、表示部の表示面が水平であるものとし、入力表示装置の正面側が向いている方角と、ペン2の軸方向の方角とにより、表示面に対するペンの角度を判定していた。表示部の表示面が水平でない場合は、上述の情報に加えて、鉛直方向に対する表示面の法線の角度と、鉛直方向に対するペンの軸方向の角度とを取得し、これらの情報に基づいて表示面に対するペンな角度を判定することができる。表示面に対するペンの相対的な角度の判定方法はこれらに限られない。
(Supplementary notes on Examples 1 and 3)
In the above example, it is assumed that the display surface of the display unit is horizontal, and the angle of the pen with respect to the display surface is determined by the direction in which the front side of the input display device faces and the direction of the axial direction of the pen 2 . If the display surface of the display unit is not horizontal, in addition to the above information, the angle of the normal to the display surface with respect to the vertical direction and the angle of the pen in the axial direction with respect to the vertical direction are obtained. The pen angle with respect to the display surface can be determined. The determination method of the relative angle of the pen to the display surface is not limited to these.

また、以上の例では、ペンの軸方向がいずれの方角を向いているかを示す方角情報を、ペンが加速度センサ及び地磁気センサからの出力に基づいて算出/取得していた。しかし、加速度センサ及び地磁気センサからの出力を角度判定情報としてペンから入力表示装置1に送信し、入力表示装置1が該出力に基づいてペンの軸方向の方角情報を算出/取得するようにしてもよい。   Further, in the above example, direction information indicating which direction the axis direction of the pen is directed is calculated / acquired based on outputs from the acceleration sensor and the geomagnetic sensor. However, the output from the acceleration sensor and the geomagnetic sensor is transmitted from the pen to the input display device 1 as angle determination information, and the input display device 1 calculates / acquires direction information of the pen axis based on the output. It is also good.

(実施例1〜3に関わる付記)
表示部の表示面に対するペンの角度に対応した回転角度を記憶するテーブルTは、ユーザが個別に設定可能であってもよい。ユーザによっては特殊なペンの持ち方をすることもあるからである。
(Supplementary notes on Examples 1 to 3)
The table T storing the rotation angle corresponding to the angle of the pen with respect to the display surface of the display unit may be set individually by the user. This is because some users hold special pens.

(実施例4)
図7は、本発明の実施例4の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンの一例を説明するためのブロック図である。図8は、図7の対応表示回転角度記憶部32aに記憶する情報の一例を説明する図である。
(Example 4)
FIG. 7 is a block diagram for explaining an example of an input display device according to a fourth embodiment of the present invention and a pen used for handwriting input to the input display device. FIG. 8 is a diagram for explaining an example of information stored in the correspondence display rotation angle storage unit 32 a of FIG. 7.

本例では、ペンを識別するための識別情報であるペンIDが各ペンに割り当てられており、ユーザは、手書き入力する際の入力表示装置1”に対するユーザの位置に応じてペンを使い分ける。   In this example, a pen ID, which is identification information for identifying a pen, is assigned to each pen, and the user selectively uses the pen in accordance with the position of the user with respect to the input display device 1 ′ ′ when performing handwriting input.

そのため、ペン2”はペンIDを記憶するペンID記憶部42を備える。
通信部41は、接触検出部22によってペン2”のペン先とタッチパネル12との接触が検知されると、ペンID記憶部42に記憶のペンIDを入力表示装置1に送信する。
Therefore, the pen 2 ′ ′ includes a pen ID storage unit 42 that stores a pen ID.
When the contact detection unit 22 detects a touch between the pen tip of the pen 2 ′ ′ and the touch panel 12, the communication unit 41 transmits the pen ID stored in the pen ID storage unit 42 to the input display device 1.

入力表示装置1”の通信部31は、ペンIDをペン2”から受信する。
記憶部32の対応表示回転角度記憶部32aは、ペンIDに対応した手書きイメージの回転角度を予め記憶する。対応表示回転角度記憶部32aは、例えば、図8のテーブルT2のように、ペンID毎に手書きイメージの回転角度を予め記憶する。
The communication unit 31 of the input display device 1 ′ ′ receives a pen ID from the pen 2 ′ ′.
The corresponding display rotation angle storage unit 32 a of the storage unit 32 stores in advance the rotation angle of the handwritten image corresponding to the pen ID. The correspondence display rotation angle storage unit 32 a stores, in advance, the rotation angle of the handwritten image for each pen ID, for example, as in the table T2 of FIG. 8.

入力表示装置1”は、ペン2”から取得されたペンIDに対応する回転角度を、所定のタイミングで対応表示回転角度記憶部32aを参照して取得する。
そして、ペン2”による手書き入力が終了すると、画面制御部13によって、ペン2”による手書きイメージを、上記取得した回転角度分回転させて表示部11に表示させる。
The input display device 1 ′ ′ acquires the rotation angle corresponding to the pen ID acquired from the pen 2 ′ ′ with reference to the corresponding display rotation angle storage unit 32a at a predetermined timing.
Then, when the handwriting input by the pen 2 ′ ′ is completed, the screen control unit 13 causes the display unit 11 to rotate the handwritten image by the pen 2 ′ ′ by the acquired rotation angle.

例えば、入力表示装置1”の正面側と反対側からユーザが手書き入力する場合は、ペンIDが“1”のペンをユーザは使用する。このペンを用いてユーザが手書き入力を開始すると、ペンID“1”が入力表示装置1”に送信される。入力表示装置1では、表示回転角度記憶部32aのテーブルT2を参照し、ID“1”に対応する回転角度180°を取得する。そして、手書き入力が終了すると、入力表示装置1では、画面制御部13によって手書きイメージを180°回転させて表示部11に表示させる。   For example, when the user performs handwriting input from the front side and the opposite side of the input display device 1 ′ ′, the user uses a pen with a pen ID of “1.” When the user starts handwriting input using this pen, the pen is used. The ID "1" is transmitted to the input display device 1 ". In the input display device 1, the table T2 of the display rotation angle storage unit 32a is referred to, and the rotation angle 180 ° corresponding to the ID “1” is acquired. Then, when the handwriting input is completed, in the input display device 1, the screen control unit 13 rotates the handwritten image by 180 ° and causes the display unit 11 to display the rotated image.

以上のようにすることにより、入力表示装置1”においても、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、正面側から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。   By doing as described above, in the input display device 1 ′ ′, even if handwriting input is performed from any direction, handwriting is made in a direction that can be easily viewed from the front side regardless of input content or horizontal writing input / vertical writing input A handwritten image based on the input can be displayed.

図9は、図7の入力表示装置1”の表示処理を説明するフローチャートである。
図示するように、入力表示装置1”の表示画面に対してペンダウンが行われると(ステップS21)、入力表示装置1”は、タッチパネル12に対するペン2”の接触を検知し、ペンIDをペン2”から通信部31を介して受信する(ステップS22)。受信したペンIDは記憶部32に記憶される。
FIG. 9 is a flowchart for explaining the display process of the input display device 1 ′ ′ of FIG.
As illustrated, when the pen down is performed on the display screen of the input display device 1 ′ ′ (Step S21), the input display device 1 ′ ′ detects a touch of the pen 2 ′ ′ with respect to the touch panel 12, and the pen ID "" Through the communication unit 31 (step S22). The received pen ID is stored in the storage unit 32.

そして、入力表示装置1”の制御部10が、タッチパネル12からの出力に基づいて、ユーザがペン2”を動かしたか否か判定する(ステップS23)。   Then, the control unit 10 of the input display device 1 ′ ′ determines whether the user has moved the pen 2 ′ ′ based on the output from the touch panel 12 (step S23).

ユーザがペン2”を動かしていた場合(YESの場合)、ペン2”の軌跡が描画されるように画面制御部13にてタッチパネル12からの出力に基づいて描画処理してから(ステップS24)、ステップS25へ処理を進める。なお、描画処理に用いられた手書き入力データは、記憶部32に記憶される。
ユーザがペン2”を動かしていない場合(ステップS23、NOの場合)、入力表示装置1はそのままステップS25へ処理を進める。
If the user has moved pen 2 ′ ′ (in the case of YES), the screen control unit 13 performs drawing processing based on the output from the touch panel 12 so that the locus of pen 2 ′ ′ is drawn (step S24) The process proceeds to step S25. The handwriting input data used for the drawing process is stored in the storage unit 32.
When the user does not move the pen 2 ′ ′ (Step S23, NO), the input display apparatus 1 proceeds the process to Step S25.

ステップS25では、入力表示装置1”は、ユーザが該装置1”からペン2”を離したか否かを、タッチパネル12からの出力に基づいて判定する。
ペン2”を離していない場合(NOの場合)、入力表示装置1”は処理をステップS23に戻す。ペン2”を離していた場合(YESの場合)、入力表示装置1”はタイムアウト時間を例えば1秒としてタイマを起動する(ステップS26)。
In step S <b> 25, the input display device 1 ′ ′ determines whether the user has released the pen 2 ′ ′ from the device 1 ′ ′ based on the output from the touch panel 12.
If the pen 2 ′ ′ is not released (in the case of NO), the input display 1 ′ returns the process to step S23. When the pen 2 "is released (in the case of YES), the input display apparatus 1" activates the timer with a time-out time of, for example, one second (step S26).

次に、入力表示装置1”の制御部10がタイムアウトしたか否か判定する(ステップS27)。
タイムアウトしていた場合(YESの場合)、すなわち、ペン2”による手書き入力が終了していた場合、入力表示装置1”は、記憶部32に記憶のペン2”のペンIDに対応する回転角度を、対応表示回転角度記憶部32aのテーブルT2(図8参照)を参照して取得する(ステップS28)。そして、画面制御部13が手書きイメージを取得された回転角度分回転させて、元の手書きイメージに代えて表示部11に表示する(ステップS29)。
Next, it is determined whether the control unit 10 of the input display device 1 '' has timed out (step S27).
If it has timed out (in the case of YES), that is, if the handwriting input by the pen 2 ′ ′ is completed, the input display device 1 ′ ′ rotates the angle corresponding to the pen ID of the pen 2 ′ ′ stored in the storage unit 32 Is acquired with reference to the table T2 (see FIG. 8) of the corresponding display rotation angle storage unit 32a (step S28), and the screen control unit 13 rotates the handwritten image by the acquired rotation angle to obtain the original. Instead of the handwritten image, it is displayed on the display unit 11 (step S29).

ステップS27において、タイムアウトしていなかった場合(NOの場合)、再度ペンダウンされたか否かをタッチパネル12からの出力に基づいて判定する(ステップS30)。ペンダウンしていない場合(NOの場合)、入力表示装置1は処理をステップS27へ戻し、ペンダウンされていた場合(YESの場合)、タイマをクリアし停止してから(ステップS31)、処理をステップS22に戻す。ここでは、再度ペンダウンされた際、ペンIDの再取得を行わない。タイムアウト時間内に、ユーザが場所を続けて描画を行う可能性が高いためである。   If it is determined in step S27 that the timeout has not occurred (in the case of NO), it is determined based on the output from the touch panel 12 whether the pen is lowered again (step S30). If the pen is not down (in the case of NO), the input display device 1 returns the process to step S27, and if the pen is down (in the case of YES), the timer is cleared and stopped (step S31). Return to S22. Here, when the pen is lowered again, the pen ID is not reacquired. This is because there is a high possibility that the user will continue to draw a place within the timeout time.

なお、ペンIDに応じて手書きイメージの表示色を異ならせてもよい。   Note that the display color of the handwritten image may be made different according to the pen ID.

(実施例1〜4に関わる付記)
手書きイメージの回転は、該イメージの中心を軸として行うことが好ましい。90°回転させる場合など、回転させた手書きイメージが表示面外にまで及ぶときは、画面制御部によって、表示面内に収まるように該回転させた手書きイメージを縮小させて表示させることが好ましい。
(Supplementary notes on the first to fourth embodiments)
The rotation of the handwritten image is preferably performed about the center of the image. When the rotated handwritten image extends out of the display surface, such as when rotated by 90 °, it is preferable that the screen control unit reduce and display the rotated handwritten image so as to fit within the display surface.

上述の例では、タッチパネルとペン先が接触したか否かに基づいて、ペンダウンすなわち手書き入力を検知していた。しかし、ペン先が完全に接触していなくてもタッチパネルにて所定量以上の静電容量変化が検知された場合には手書き入力されたものとしてもよい。この場合、ペンには上述の接触検出部を設ける必要がなく、傾き情報やペンIDの情報はペン先の接触検出後ではなく定期的にペンから送信される。   In the above-described example, pen down, that is, handwriting input is detected based on whether or not the touch panel and the pen tip are in contact with each other. However, even if the pen tip is not completely in contact with the touch panel, if a change in capacitance of a predetermined amount or more is detected by the touch panel, handwriting input may be performed. In this case, it is not necessary to provide the above-mentioned contact detection unit in the pen, and information on tilt information and pen ID is transmitted from the pen periodically, not after contact detection on the pen tip.

入力表示装置は、情報を表示する表示面を有する表示部と、表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備え、さらに表示面に対するペンの角度を判定する角度判定部と、上記ペンの角度に対応した回転角度を予め記憶する回転角度記憶部と、を備え、ペンによる手書き入力終了後、上記ペンの角度に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示する。これにより、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。   The input display device includes a display unit having a display surface for displaying information, a touch panel for detecting handwriting input by a user's pen on the display surface, and an angle determination unit that determines an angle of the pen to the display surface. A rotation angle storage unit for storing in advance the rotation angle corresponding to the angle of the pen, and after the handwriting input by the pen is completed, the handwritten image based on the handwriting input is rotated by the rotation angle corresponding to the angle of the pen Display. As a result, regardless of which direction the handwriting input is made, the handwritten image based on the handwriting input can be displayed in an orientation that is easy to see from the predetermined direction regardless of the input content or the horizontal writing / vertical writing input.

入力表示装置は、ペンの傾き情報を、当該ペンから受信する傾き情報受信部を備え、角度判定部は、ペンの傾き情報に基づいて、表示面に対するペンの角度を判定するとよい。これにより、表示面に対するペンの角度を正確に判定することができる。   The input display device may include a tilt information receiving unit that receives tilt information of the pen from the pen, and the angle determination unit may determine the angle of the pen with respect to the display surface based on the tilt information of the pen. This makes it possible to accurately determine the angle of the pen with respect to the display surface.

入力表示装置は、右手による手書き入力か左手による手書き入力かを判定する判定部を備え、右手による手書き入力と左手による手書き入力とでは、手書き入力終了後に表示する手書きイメージの回転角度を異ならせるとよい。これにより右手による手書き入力か左手による手書き入力かによらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。   The input display device includes a determination unit that determines whether handwriting input with the right hand or handwriting with the left hand is performed, and the rotation angle of the handwritten image displayed after handwriting input is different between handwriting input with the right hand and handwriting input with the left hand. Good. This makes it possible to display a handwritten image based on handwriting input in an orientation that makes it easy to see from a predetermined direction, regardless of whether it is handwriting input by the right hand or handwriting input by the left hand.

入力表示装置は、情報を表示する表示面を有する表示部と、表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備え、ペンの識別情報に対応した回転角度を記憶する回転角度記憶部と、ペンの識別情報をペンから取得する識別情報取得部と、を備え、ペンによる手書き入力終了後、当該ペンから取得された識別情報に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示する。これにより、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。   The input display device includes a display unit having a display surface for displaying information, and a touch panel for detecting handwriting input by a user's pen on the display surface, and a rotation angle storage for storing a rotation angle corresponding to identification information of the pen. And an identification information acquisition unit for acquiring pen identification information from the pen, and after completion of handwriting input by the pen, a handwritten image based on the handwriting input for the rotation angle corresponding to the identification information acquired from the pen Rotate to display. As a result, regardless of which direction the handwriting input is made, the handwritten image based on the handwriting input can be displayed in an orientation that is easy to see from the predetermined direction regardless of the input content or the horizontal writing / vertical writing input.

入力表示装置は、手書きイメージを回転させて表示する際、回転させた手書きイメージが表示面外にまで及ぶ場合、手書きイメージを縮小させて表示するとよい。これにより、手書きイメージ全体を表示することができる。   When the input display device rotates and displays the handwritten image, if the rotated handwritten image extends out of the display surface, the handwritten image may be reduced and displayed. Thus, the entire handwritten image can be displayed.

1,1´,1”…入力表示装置、10…制御部、11…表示部、11a…表示面、12…タッチパネル、13…画面制御部、14,…通信部、15…角度判定部、16,32…記憶部、16a,32a…対応表示回転角度記憶部、2,2´,2”…ペン、20…制御部、21,41…通信部、22…接触検出部、23…傾き情報取得部、42…ペンID記憶部。
1, 1 ', 1 "... input display device, 10 ... control unit, 11 ... display unit, 11a ... display surface, 12 ... touch panel, 13 ... screen control unit, 14 ... communication unit, 15 ... angle determination unit, 16 , 32 ... storage unit 16a, 32a ... corresponding display rotation angle storage unit 2, 2 ', 2 "... pen, 20 ... control unit, 21, 41 ... communication unit, 22 ... contact detection unit, 23 ... tilt information acquisition Part 42: Pen ID storage part.

Claims (9)

情報を表示する表示面を有する表示部と、前記表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備えた入力表示装置であって、
前記表示面に対する前記ペンの角度を判定する角度判定部と、
前記ペンの角度に対応した回転角度を予め記憶する回転角度記憶部と、
前記ペンによる手書き入力の終了を判定する手書き入力終了判定部と、を備え、
前記ペンによる手書き入力中は、前記表示面上に手書き入力されたペンの軌跡が描画されるように手書きイメージを回転させずに表示すると共に、
前記ペンによる手書き入力終了後、前記ペンの角度に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示することを特徴とする入力表示装置。
An input display device comprising: a display unit having a display surface for displaying information; and a touch panel for detecting handwriting input by a user's pen on the display surface,
An angle determination unit that determines an angle of the pen with respect to the display surface;
A rotation angle storage unit which stores in advance a rotation angle corresponding to the angle of the pen;
A handwriting input end determination unit that determines an end of handwriting input by the pen;
During handwriting input by the pen, the handwritten image is displayed without being rotated so that the locus of the pen input by handwriting is drawn on the display surface.
An input display apparatus, wherein a handwritten image based on the handwriting input is rotated and displayed by a rotation angle corresponding to an angle of the pen after the handwriting input by the pen is finished.
前記ペンの傾き情報を、当該ペンから受信する傾き情報受信部を備え、
前記角度判定部は、前記ペンの傾き情報に基づいて、前記表示面に対する前記ペンの角度を判定することを特徴とする請求項1に記載の入力表示装置。
A tilt information receiving unit that receives tilt information of the pen from the pen;
The input display apparatus according to claim 1, wherein the angle determination unit determines an angle of the pen with respect to the display surface based on tilt information of the pen.
前記傾き情報は、前記ペンに備えられた加速度センサの出力に基づく情報であることを特徴とする請求項2に記載の入力表示装置。   The input display apparatus according to claim 2, wherein the tilt information is information based on an output of an acceleration sensor provided in the pen. 前記傾き情報は、前記ペンの軸方向がいずれの方角を向いているかを示す、ペンの方角情報であり、
前記入力表示装置は、前記入力表示装置の所定の面が向いている方角を示す、入力表示装置の方角情報を取得する方角情報取得部を備え、
前記角度判定部は、前記ペンの方角情報と、前記入力表示装置の方角情報と、に基づき前記表示面に対する前記ペンの角度を判定することを特徴とする請求項2または3に記載の入力表示装置。
The tilt information is direction information of a pen indicating which direction the axial direction of the pen faces.
The input display device includes a direction information acquisition unit that acquires direction information of the input display device indicating a direction in which a predetermined surface of the input display device faces.
The input display according to claim 2 or 3, wherein the angle determination unit determines an angle of the pen with respect to the display surface based on direction information of the pen and direction information of the input display device. apparatus.
前記ペンの方角情報は、前記ペンに備えられた地磁気センサの出力に基づく情報であり、
前記入力表示装置は、地磁気センサを備え、
前記方角情報取得部は、前記入力表示装置の前記地磁気センサの出力に基づいて、前記入力表示装置の方角情報を取得することを特徴とする請求項4に記載の入力表示装置。
The direction information of the pen is information based on the output of a geomagnetic sensor provided on the pen,
The input display device comprises a geomagnetic sensor,
The input display device according to claim 4, wherein the direction information acquisition unit acquires direction information of the input display device based on an output of the geomagnetic sensor of the input display device.
右手による手書き入力か左手による手書き入力かを判定する判定部を備え、前記右手による手書き入力と前記左手による手書き入力とでは、前記手書き入力終了後に表示する前記手書きイメージの回転角度を異ならせることを特徴とする請求項1〜5のいずれか1項に記載の入力表示装置。   It is provided with a determination unit that determines whether the handwriting input by the right hand or the handwriting input by the left hand, and that the rotation angle of the handwritten image displayed after the handwriting input is different between the handwriting input by the right hand and the handwriting input by the left hand The input display device according to any one of claims 1 to 5, characterized in that: 情報を表示する表示面を有する表示部と、前記表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備え
前記ペンの識別情報に対応した回転角度を記憶する回転角度記憶部と、
前記ペンの識別情報を前記ペンから取得する識別情報取得部と、
前記ペンによる手書き入力の終了を判定する手書き入力終了判定部と、を備え、
前記ペンによる手書き入力中は、前記表示面上に手書き入力されたペンの軌跡が描画されるように手書きイメージを回転させずに表示すると共に、
前記ペンによる手書き入力終了後、当該ペンから取得された識別情報に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示することを特徴とする入力表示装置。
A rotation angle storage unit storing a rotation angle corresponding to identification information of the pen, comprising: a display unit having a display surface for displaying information; and a touch panel for detecting handwriting input by a user's pen on the display surface.
An identification information acquisition unit that acquires identification information of the pen from the pen;
A handwriting input end determination unit that determines an end of handwriting input by the pen;
During handwriting input by the pen, the handwritten image is displayed without being rotated so that the locus of the pen input by handwriting is drawn on the display surface.
An input display apparatus characterized by rotating and displaying a handwritten image based on the handwriting input by an angle of rotation corresponding to identification information acquired from the pen after completion of handwriting input by the pen.
前記手書き入力終了判定部は、ユーザが前記入力表示装置からペンを離したか否かを前記タッチパネルからの出力に基づいて判定し、ユーザが前記入力表示装置からペンを離した状態で所定の時間が経過した場合に手書き入力が終了したと判定することを特徴とする請求項1〜7のいずれか1項に記載の入力表示装置。   The handwriting input end determination unit determines whether or not the user has released the pen from the input display device based on the output from the touch panel, and a predetermined time in a state where the user releases the pen from the input display device The input display device according to any one of claims 1 to 7, wherein it is determined that the handwriting input has ended when it has elapsed. 前記手書きイメージを回転させて表示する際、回転させた前記手書きイメージが前記表示面外にまで及ぶ場合、前記手書きイメージを縮小させて表示することを特徴とする請求項1〜8のいずれか1項に記載の入力表示装置。
The display device according to any one of claims 1 to 8, wherein, when the handwritten image is rotated and displayed, the handwritten image is reduced and displayed if the rotated handwritten image extends outside the display surface. The input display device described in the section.
JP2018193130A 2018-10-12 2018-10-12 Input display Active JP6549776B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018193130A JP6549776B2 (en) 2018-10-12 2018-10-12 Input display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018193130A JP6549776B2 (en) 2018-10-12 2018-10-12 Input display

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014114852A Division JP6757114B2 (en) 2014-06-03 2014-06-03 Input display device

Publications (2)

Publication Number Publication Date
JP2019023920A JP2019023920A (en) 2019-02-14
JP6549776B2 true JP6549776B2 (en) 2019-07-24

Family

ID=65368553

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018193130A Active JP6549776B2 (en) 2018-10-12 2018-10-12 Input display

Country Status (1)

Country Link
JP (1) JP6549776B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11907867B2 (en) * 2019-06-05 2024-02-20 Paypal, Inc. Identification and suggestion of rules using machine learning

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3161794B2 (en) * 1992-03-05 2001-04-25 松下電器産業株式会社 Pen input device and pen input method
JPH06290016A (en) * 1993-03-31 1994-10-18 Fujitsu Ltd Display device for face-to-face dealing and its control method
JP2007226703A (en) * 2006-02-27 2007-09-06 Seiko Epson Corp Autograph signature authentication apparatus
JP2011113128A (en) * 2009-11-24 2011-06-09 Sharp Corp Pen tablet input device and input method using the same

Also Published As

Publication number Publication date
JP2019023920A (en) 2019-02-14

Similar Documents

Publication Publication Date Title
KR100947405B1 (en) Implement for Optically Inferring Information from a Planar Jotting Surface
CN103176706A (en) Mobile information terminal and method for displaying electronic content
JP5482522B2 (en) Display control apparatus, display control method, and program
US9886107B2 (en) Information processing apparatus, information processing method, and program
JP5666238B2 (en) Electronic device and display method
US20170285904A1 (en) Direct data transfer electronic device and method
JP2009217442A (en) Information input display device
JP6757114B2 (en) Input display device
JP6549776B2 (en) Input display
WO2008075661A1 (en) Display device
JP2009037464A (en) Image display device and computer program
TWI621971B (en) Handwriting-gesture notification method and electronic system using the same
US9659167B2 (en) Handheld electronic device and method for entering password thereof
US20070195065A1 (en) Jog-dial assisted character selection
JP5827695B2 (en) Information processing apparatus, information processing method, program, and information storage medium
TWI620099B (en) Method for determining display orientation and electronic apparatus using the same and computer readable recording medium
JP6479227B2 (en) Information processing apparatus and computer program
JP6528450B2 (en) Handwriting input device
JP2016035664A (en) Input display device
JP2019046088A (en) Display control apparatus, pointer display method, and program
CN112639695B (en) Adaptive digital pen and touch sensitive device
JP5972082B2 (en) Information processing apparatus, display method, and program
JP6497266B2 (en) Erase medium and handwriting input system
JP2009053956A (en) Electronic board system
JP6296547B2 (en) Portable information processing apparatus and computer program

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190531

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190611

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190627

R150 Certificate of patent or registration of utility model

Ref document number: 6549776

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150