JP6757114B2 - Input display device - Google Patents
Input display device Download PDFInfo
- Publication number
- JP6757114B2 JP6757114B2 JP2014114852A JP2014114852A JP6757114B2 JP 6757114 B2 JP6757114 B2 JP 6757114B2 JP 2014114852 A JP2014114852 A JP 2014114852A JP 2014114852 A JP2014114852 A JP 2014114852A JP 6757114 B2 JP6757114 B2 JP 6757114B2
- Authority
- JP
- Japan
- Prior art keywords
- pen
- input
- display device
- angle
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
本発明は、入力表示装置に関し、特に、タッチパネルを備え、ペンによる手書き入力が可能な入力表示装置に関する。 The present invention relates to an input display device, and more particularly to an input display device provided with a touch panel and capable of handwriting input with a pen.
液晶パネル等の表示装置と、タッチ操作による入力を検出可能なタッチパネルとが一体となった入力表示装置が知られている。このタッチパネルが一体となった入力表示装置は、例えば、教室やオフィスなどで電子黒板として使用される。このような入力表示装置に対しては、ユーザはペンを用いて手書き入力することが多い。 There is known an input display device in which a display device such as a liquid crystal panel and a touch panel capable of detecting input by touch operation are integrated. The input display device integrated with this touch panel is used as an electronic blackboard in, for example, a classroom or an office. For such an input display device, the user often inputs by handwriting using a pen.
ペンによる手書き入力可能な入力表示装置は、低価格が進み、上述以外の用途、例えば対面式の商談などで用いられてきている。対面式の商談では、上記入力表示装置はテーブル上に置かれた状態で用いられる。従前の入力表示装置は、該装置正面からの手書き入力を前提として設計されており、客と店員が異なる方向に向いて着座している対面式の商談では客が見えるように店員が手書き入力する際、例えば以下のようにする必要がある。すなわち、客側が正面となっていた入力表示装置の向きを店員側が正面となるように一旦変えてから手書き入力し、その後に再度客側が正面となるように入力表示装置の向きを戻す必要がある。入力表示装置の向きが変えられない場合は、入力表示装置の正面側である客側に店員が移動して手書き入力する必要がある。 Input display devices capable of handwriting input with a pen are becoming cheaper and have been used for applications other than the above, such as face-to-face business negotiations. In face-to-face business negotiations, the input display device is used while being placed on a table. The conventional input display device is designed on the premise of handwriting input from the front of the device, and in a face-to-face business negotiation in which the customer and the clerk are seated facing different directions, the clerk inputs by handwriting so that the customer can see. At that time, for example, it is necessary to do as follows. That is, it is necessary to change the orientation of the input display device with the customer side facing the front, then input by handwriting so that the clerk side faces the front, and then return the orientation of the input display device so that the customer side faces the front again. .. If the orientation of the input display device cannot be changed, the clerk must move to the customer side, which is the front side of the input display device, to input by handwriting.
特許文献1には、着座位置の異なる複数の手書き入力者が同一のタッチパネルを用いて交互に手書き文字による情報を交換する際に、手書き文字入力の運筆方向に基づいて、手書きイメージの表示方向を変えて、該表示方向を揃える入力表示装置が開示されている。
In
しかし、特許文献1の入力表示装置では、該入力表示装置に対して全ての方向からの手書きイメージを所定の方向に向けて表示することができない。例えば、横側から縦書き入力された場合に、正面側から見えやすいような向きで手書きイメージを表示することができない。また、一文字のみ手書き入力された場合や図形が手書き入力された場合に、すなわち文章以外が手書き入力された際に、特許文献1の入力表示装置では運筆方向を正しく判定できないので、手書きイメージを所定の方向に向けて表示することができない可能性がある。
However, the input display device of
本発明は、上述のような実情に鑑みてなされたものであり、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示する入力表示装置を提供することをその目的とする。 The present invention has been made in view of the above-mentioned circumstances, and it is easy to see from a predetermined direction regardless of the input content or the horizontal writing input / vertical writing input even when handwritten input is performed from any direction. An object of the present invention is to provide an input display device that displays a handwritten image based on handwritten input in an orientation.
上記課題を解決するために、本発明の第1の技術手段は、情報を表示する表示面を有する表示部と、前記表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備えた入力表示装置であって、前記表示面に対する前記ペンの角度を判定する角度判定部と、前記ペンの角度に対応した回転角度を予め記憶する回転角度記憶部と、前記ペンの傾き情報を、当該ペンから受信する傾き情報受信部と、を備え、前記角度判定部は、前記ペンの傾き情報に基づいて、前記表示面に対する前記ペンの角度を判定し、前記ペンによる手書き入力終了後、前記ペンの角度に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示することを特徴としたものである。 In order to solve the above problem, the first technical means of the present invention includes an input having a display surface for displaying information and a touch panel for detecting handwritten input by a user's pen on the display surface. An angle determination unit that determines the angle of the pen with respect to the display surface, a rotation angle storage unit that stores a rotation angle corresponding to the angle of the pen in advance , and tilt information of the pen in the display device. The angle determination unit includes an inclination information receiving unit that receives from the pen , determines the angle of the pen with respect to the display surface based on the inclination information of the pen, and after the handwriting input by the pen is completed, the angle determination unit of the pen. The feature is that the handwritten image based on the handwritten input is rotated and displayed by the rotation angle corresponding to the angle.
本発明の第2の技術手段は、第1の技術手段において、前記傾き情報は、前記ペンに備えられた加速度センサの出力に基づく情報であることを特徴としたものである。 The second technical means of the present invention is characterized in that, in the first technical means, the tilt information is information based on the output of the acceleration sensor provided in the pen .
本発明の第3の技術手段は、第1または2の技術手段において、前記傾き情報は、前記ペンの軸方向がいずれの方角を向いているかを示す、ペンの方角情報であり、前記入力表示装置は、前記入力表示装置の所定の面が向いている方角を示す、入力表示装置の方角情報を取得する方角情報取得部を備え、前記角度判定部は、前記ペンの方角情報と、前記入力表示装置の方角情報と、に基づき前記表示面に対する前記ペンの角度を判定することを特徴としたものである。
本発明の第4の技術手段は、第4の技術手段において、前記ペンの方角情報は、前記ペンに備えられた地磁気センサの出力に基づく情報であり、前記入力表示装置は、地磁気センサを備え、前記方角情報取得部は、前記入力表示装置の前記地磁気センサの出力に基づいて、前記入力表示装置の方角情報を取得することを特徴としたものである。
According to the third technical means of the present invention, in the first or second technical means, the tilt information is the direction information of the pen indicating which direction the axial direction of the pen is facing, and the input display. The device includes a direction information acquisition unit for acquiring direction information of the input display device, which indicates a direction in which a predetermined surface of the input display device is facing, and the angle determination unit includes the direction information of the pen and the input. It is characterized in that the angle of the pen with respect to the display surface is determined based on the direction information of the display device .
The fourth technical means of the present invention is the fourth technical means, in which the direction information of the pen is information based on the output of the geomagnetic sensor provided on the pen, and the input display device includes the geomagnetic sensor. The direction information acquisition unit is characterized in that it acquires direction information of the input display device based on the output of the geomagnetic sensor of the input display device .
本発明の第5の技術手段は、第1〜4のいずれか1の技術手段において、右手による手書き入力か左手による手書き入力かを判定する判定部を備え、前記右手による手書き入力と前記左手による手書き入力とでは、前記手書き入力終了後に表示する前記手書きイメージの回転角度を異ならせることを特徴としたものである。 The fifth technical means of the present invention includes a determination unit for determining whether handwritten input by the right hand or handwritten input by the left hand in any one of the first to fourth technical means, and the handwritten input by the right hand and the handwritten input by the left hand. The handwriting input is characterized in that the rotation angle of the handwriting image displayed after the completion of the handwriting input is different.
本発明の第6の技術手段は、第1〜5のいずれか1の技術手段において、前記手書きイメージを回転させて表示する際、回転させた前記手書きイメージが前記表示面外にまで及ぶ場合、前記手書きイメージを縮小させて表示することを特徴としたものである。 According to the sixth technical means of the present invention, when the handwritten image is rotated and displayed in any one of the first to fifth technical means, when the rotated handwritten image extends beyond the display surface. The feature is that the handwritten image is reduced and displayed.
本発明の入力表示装置によれば、いずれの方向から手書き入力された場合でも、入力内
容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入
力に基づく手書きイメージを表示することができる。
According to the input display device of the present invention, a handwritten image based on handwritten input in a direction that makes it easy to see from a predetermined direction regardless of the input content or horizontal / vertical input regardless of the direction of handwritten input. Can be displayed.
以下、図面を参照しながら、本発明の表示装置の好適な実施形態について説明する。なお、以下の発明において、異なる図面においても同じ符号を付した構成は同様のものであるとして、その説明を省略する。 Hereinafter, preferred embodiments of the display device of the present invention will be described with reference to the drawings. In the following invention, it is assumed that the configurations with the same reference numerals are the same in different drawings, and the description thereof will be omitted.
(実施例1)
図1は、本発明の実施例1の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンの一例を説明するためのブロック図である。図2は、図1のペンの外形の模式図である。
(Example 1)
FIG. 1 is a block diagram for explaining an example of an input display device according to a first embodiment of the present invention and a pen used for handwriting input to the input display device. FIG. 2 is a schematic view of the outer shape of the pen of FIG.
入力表示装置1は、図1に示すように、制御部10、表示部11、タッチパネル12、画面制御部13、通信部14、角度判定部15及び対応表示回転角度記憶部16aを備える。以下の説明では、入力表示装置1が、表示部11の表示面が水平となるような状態で用いられるものとする。
As shown in FIG. 1, the
制御部10は、CPU(Central Processing Unit)等から構成されるもので、入力表示装置1全体を制御する。
表示部11は、例えば液晶表示パネルから構成されるもので、手書き入力を含むユーザ入力に基づく表示画面を表示面に表示する。
タッチパネル12は、表示部11の表示面を覆うように設けられ該表示面に対するユーザのタッチ入力を検出する。本例では、タッチパネル12は投影型静電容量方式のタッチパネルであるものとする。
画面制御部13は、表示部11の表示面に表示する表示画面を制御する。
通信部14は、Bluetooth(登録商標)やZigBee(登録商標)などによりペン2と通信するものである。この通信部14は、ペン2の傾き情報を該ペン2より受信する「傾き情報受信部」である。
The
The
The
The
The
ここで、ペン2について説明する。
ペン2は、制御部20、通信部21、接触検出部22、傾き情報取得部23を備える。ペン2のペン先には導電性チップが用いられており、ペン先が入力表示装置1のタッチパネル12に触れたときにタッチパネル12が検出可能となっている。
制御部20は、CPU(Central Processing Unit)等から構成されるもので、ペン2全体を制御する。
Here, the
The
The
通信部21は、Bluetooth(登録商標)やZigBee(登録商標)などにより入力表示装置1と通信するものである。
The
接触検出部22は、ペン2のペン先とタッチパネル12との接触を検知できる。例えば、特開2009−288968号公報に記載のような構成を採用することで上記接触を検知できる。
The
傾き情報取得部23は、ペン2の傾き情報を取得するものである。この傾き情報取得部23は、例えば、3軸加速度センサ及び地磁気センサを含み、これらセンサからの出力に基づいてペン2の軸方向がいずれの方角を向いているかを示す方角情報を傾き情報として取得し出力する。なお、ペン2の軸方向とは、図2のペン2の中心軸2aを通りペン2の先端2bから後端2cに向かう方向である。
ペン2は、接触検出部22によって該ペン2のペン先とタッチパネル12との接触が検知されると、傾き情報取得部23により傾き情報を取得し通信部21を介して入力表示装置1に送信する。
The tilt
When the
図1の入力表示装置1の説明に戻る。
入力表示装置1の角度判定部15は、通信部14を介して受信した傾き情報に基づいて、表示部11の表示面に対するペン2の角度を判定する。入力表示装置1は、不図示の地磁気センサを含み、該装置1の正面が向いている方角を検出できるようになっている。入力表示装置1の正面とは、通常表示を行った際に正方向の画像が見られる位置である。角度判定部15は、例えば、この入力表示装置1の正面が向いている方角の情報と、ペン2から傾き情報として取得したペン2の軸方向の方角情報とに基づいて、表示部11の表示面に対するペン2の角度を判定する。
Returning to the description of the
The
記憶部16は、HDD(Hard Disk Drive)やROM(Read Only Memory)等の記憶媒体から成り、各種情報を記憶するもので、対応表示回転角度記憶部16aを有する。
角度判定部15で判定した、表示部11の表示面に対するペン2の角度によって、ペン2を用いた手書き入力ユーザの位置する方向が推定できる。推定されるユーザの位置する方向によらず手書き入力結果の向きが表示部11の正面側から見て正方向となるようにするためには、手書き入力結果を回転して表示する必要がある。そのため、対応表示回転角度記憶部16aは、表示部11の表示面に対するペン2の角度に対応した回転角度を予め記憶する。
The
The direction in which the handwriting input user using the
図3は、対応表示回転角度記憶部16aに記憶する情報を説明する図である。ここでは、図3(A)の表示面11aの向き(表示面11aの正面とは反対側から該正面側に向かう方向、すなわち図の上から下に向かう方向)とペン2の軸方向が一致する場合に上記ペン2の角度を0°とし、ペン2の軸方向が反時計回り方向にずれるにしたがって、上記ペン2の角度の値は増加する。
表示面11aに対するペン2の角度が、46〜135°の場合は、手書き入力ユーザの位置が正面側の位置であることが推定され、手書き入力結果は、表示の際に回転しなくても入力結果の向きが正面側から見て正方向となる。
一方、表示面11aに対するペン2の角度が、226〜315°の場合は、手書き入力ユーザの位置が正面側とは反対側の位置であることが推定され、手書き入力結果は、表示の際に180°回転すると入力結果の向きが正面側から見て正方向となる。
FIG. 3 is a diagram for explaining information stored in the corresponding display rotation angle storage unit 16a. Here, the orientation of the display surface 11a in FIG. 3A (the direction from the side opposite to the front surface of the display surface 11a toward the front side, that is, the direction from the top to the bottom in the drawing) coincides with the axial direction of the
When the angle of the
On the other hand, when the angle of the
また、表示面11aに対するペン2の角度が、136〜225°の場合は、手書き入力ユーザの位置が正面側から見て右側の位置であることが推定され、手書き入力結果は、表示の際に時計回りに90°回転すると入力結果の向きが正面側から見て正方向となる。
さらに、表示面11aに対するペン2の角度が、316〜360°や0〜45°の場合は、手書き入力ユーザの位置が正面側から見て左側の位置であることが推定され、手書き入力結果は、表示の際に反時計回りに90°回転すると入力結果の向きが正面側から見て正方向となる。
Further, when the angle of the
Further, when the angle of the
対応表示回転角度記憶部16aは、表示部11の表示面に対するペン2の相対的な角度から推定される手書き入力ユーザの位置する方向によらず手書き入力結果の向きが正面側から見て正方向となるように、例えば、図3(B)のテーブルT1のように、上記ペン2の角度毎に、表示に際する手書き入力結果の回転角度を予め記憶する。
In the corresponding display rotation angle storage unit 16a, the direction of the handwriting input result is positive when viewed from the front side regardless of the direction in which the handwriting input user is located, which is estimated from the relative angle of the
以上の各部を備える図1の入力表示装置1は、ペン2から取得された傾き情報に基づいて判定された上記ペン2の角度に対応する回転角度を、所定のタイミングで対応表示回転角度記憶部16aを参照して取得する。
そして、ペン2による手書き入力が終了すると、画面制御部13によって、ペン2による手書き入力に基づく手書きイメージを、上記取得した回転角度分回転させて表示部11に表示させる。
The
Then, when the handwriting input by the
これにより、入力表示装置1では、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、正面側から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。
As a result, the
なお、上記ペン2の角度に対応する回転角度を取得するタイミングは、ペン2による手書き入力に基づく手書きイメージの回転表示前であればよく、ペン2による手書き入力が終了した後でもよい。
The timing of acquiring the rotation angle corresponding to the angle of the
図4は、入力表示装置1の表示画面例を示す図であり、図4(A)は、入力表示装置1の正面とは反対の逆側にいるユーザがペン2を入力表示装置1にタッチさせ手書き入力を開始した時の表示画面例、図4(B)は同手書き入力中の表示画面例、図4(C)は、同手書き入力終了後の表示画面例を示す。
FIG. 4 is a diagram showing an example of a display screen of the
入力表示装置1は、図4(A)に示すようなブランクの表示画面を表示しているときに、逆側にいるユーザからペン2用いて手書き入力が開始されると、上述のように角度判定情報をペン2から取得し、角度判定部15が該情報に基づいてペン2の角度を判定する。図の例では、ペン2の角度は240°であると判定される。また、入力表示装置1はペン2の角度の判定の他、手書き入力に応じた描画処理を開始する。描画処理に用いられた手書き入力データ(ストロークデータともいう)は、ペン2の角度の情報と共に記憶部16に記憶される。
When the
入力表示装置1は、手書き入力中は、図4(B)に示すように、手書き入力に基づく手書きイメージAを一旦逆さまに表示する。
手書き入力終了後は、入力表示装置1では、図3(B)のテーブルT1を参照し、ペン2の角度に対応する回転角度を取得する。図の例では、ペン2の角度240°に対応する回転角度として180°が取得される。そして、入力表示装置1は、
記憶部16に記憶していた手書き入力データに基づいて、上述のペン2の角度に対応する180°回転させることによって、図4(C)に示すように、手書きイメージAの向きが正方向になるように表示することができる。
As shown in FIG. 4B, the
After the handwriting input is completed, the
Based on the handwritten input data stored in the
図5は、図1の入力表示装置1の表示処理を説明するフローチャートである。
図示するように、入力表示装置1の表示画面に対してペンダウンが行われると(ステップS1)、入力表示装置1は、タッチパネル12に対するペン2の接触を検知し、傾き情報として、ペン2の軸方向がいずれの方角を向いているかを示す方角情報をペン2から通信部14を介して受信する(ステップS2)。
FIG. 5 is a flowchart illustrating the display process of the
As shown in the figure, when the pen down is performed on the display screen of the input display device 1 (step S1), the
そして、角度判定部15が傾き情報に基づいて表示面に対するペン2の角度を判定する(ステップS3)。判定により得られた、表示面に対するペン2の角度の情報は記憶部16に記憶される。
次いで、入力表示装置1の制御部10が、タッチパネル12からの出力に基づいて、ユーザがペン2を動かしたか否か判定する(ステップS4)。
Then, the
Next, the
ユーザがペン2を動かしていた場合(YESの場合)、ペン2の軌跡が描画されるように画面制御部13にてタッチパネル12からの出力に基づいて描画処理してから(ステップS5)、ステップS6へ処理を進める。なお、描画処理に用いられた手書き入力データは、記憶部16に記憶される。
ユーザがペン2を動かしていない場合(ステップS4、NOの場合)、入力表示装置1はそのままステップS6へ処理を進める。
When the user is moving the pen 2 (YES), the
If the user has not moved the pen 2 (in the case of steps S4 and NO), the
ステップS6では、入力表示装置1は、ユーザが該装置1からペン2を離したか否かを、タッチパネル12からの出力に基づいて判定する。
ペン2を離していない場合(NOの場合)、入力表示装置1は処理をステップS4に戻す。ペン2を離していた場合(YESの場合)、入力表示装置1はタイムアウト時間を例えば1秒としてタイマを起動する(ステップS7)。
In step S6, the
If the
次に、入力表示装置1の制御部10がタイムアウトしたか否か判定する(ステップS8)。
タイムアウトしていた場合(YESの場合)、すなわち、ペン2による手書き入力が終了していた場合、入力表示装置1は、記憶部16に記憶のペン2の角度に対応する回転角度を、対応表示回転角度記憶部16aのテーブルT1(図3参照)を参照して取得する(ステップS9)。そして、画面制御部13が手書きイメージを取得された回転角度分回転させて、元の手書きイメージに代えて表示部11に表示する(ステップS10)。
Next, it is determined whether or not the
When the time-out has occurred (YES), that is, when the handwriting input by the
ステップS8において、タイムアウトしていなかった場合(NOの場合)、再度ペンダウンされたか否かをタッチパネル12からの出力に基づいて判定する(ステップS11)。ペンダウンしていない場合(NOの場合)、入力表示装置1は処理をステップS8へ戻し、ペンダウンされていた場合(YESの場合)、タイマをクリアし停止してから(ステップS12)、処理をステップS4に戻す。ここでは、再度ペンダウンされた際、ペンの傾き情報の再取得を行わず、表示面に対するペン2の角度を再判定しない。タイムアウト時間内に、ユーザが場所を変更する可能性は低いためである。
In step S8, if the time-out has not occurred (NO), it is determined based on the output from the
(実施例2)
図6は、本発明の実施例2の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンを説明するための図である。
実施例1は、ペンによる手書き入力の際、ユーザが右手または左手のいずれか一方を使用することを前提としたものである。
(Example 2 )
FIG. 6 is a diagram for explaining an input display device according to a second embodiment of the present invention and a pen used for handwriting input to the input display device.
The first embodiment is based on the premise that the user uses either the right hand or the left hand when inputting handwriting with a pen.
図6(A)及び図6(B)に示すように、入力表示装置1´の正面側からペン2´による手書き入力を行う場合でも、右手を使うか左手を使うかによってペン2´の角度は異なる。
したがって、右手による手書き入力か左手による手書き入力かを判定する判定部を入力表示装置1´に設け、右手による手書き入力と左手による手書き入力とでは、手書き入力終了後に表示する手書きイメージの回転角度を異ならせるとよい。
As shown in FIGS. 6 (A) and 6 (B), even when handwriting input is performed by the pen 2'from the front side of the input display device 1', the angle of the pen 2'depends on whether the right hand or the left hand is used. Is different.
Therefore, the input display device 1'is provided with a determination unit for determining whether the handwriting input is performed by the right hand or the left hand, and the rotation angle of the handwritten image displayed after the completion of the handwriting input is determined between the handwriting input by the right hand and the handwriting input by the left hand. You should make it different.
右手による手書き入力か左手による手書き入力かの判定は、例えば、以下のようにすることで行うことができる。すなわち、ペン2´にスイッチを設け、該スイッチの操作状況を所定のタイミングで入力表示装置1´に送信する。入力表示装置1´では、受信した操作状況の情報に基づいて上記判定を行うことができる。
右手/左手の判定方法は、上述の例に限られず、例えば、上述と同様のスイッチを入力表示装置1´側に設け、該スイッチの操作状況に基づいて判定してもよい。
The determination of handwriting input by the right hand or handwriting input by the left hand can be performed by, for example, as follows. That is, a switch is provided on the pen 2', and the operation status of the switch is transmitted to the input display device 1'at a predetermined timing. The input display device 1'can make the above determination based on the received operation status information.
The right-hand / left-hand determination method is not limited to the above-mentioned example, and for example, a switch similar to the above may be provided on the input display device 1'side and the determination may be made based on the operation status of the switch.
なお、タッチパネルに対してペン先と共にユーザの掌が触れる場合に、掌によるタッチ入力をキャンセルしペン先によるタッチ入力のみを有効とする方法には従前の技術(例えば特開2013−8317号公報)を使用できる。また、入力領域がペン先によるものかユーザの掌によるものかは、該入力領域の面積が所定値より大きいか否かで判定することができる。 In addition, when the user's palm touches the touch panel together with the pen tip, a method of canceling the touch input by the palm and enabling only the touch input by the pen tip is a conventional technique (for example, Japanese Patent Application Laid-Open No. 2013-8317). Can be used. Further, whether the input area is due to the pen tip or the palm of the user can be determined by whether or not the area of the input area is larger than a predetermined value.
(実施例1、2に関わる付記)
以上の例では、表示部の表示面が水平であるものとし、入力表示装置の正面側が向いている方角と、ペン2の軸方向の方角とにより、表示面に対するペンの角度を判定していた。表示部の表示面が水平でない場合は、上述の情報に加えて、鉛直方向に対する表示面の法線の角度と、鉛直方向に対するペンの軸方向の角度とを取得し、これらの情報に基づいて表示面に対するペンな角度を判定することができる。表示面に対するペンの相対的な角度の判定方法はこれらに限られない。
(Additional notes relating to Examples 1 and 2 )
In the above example, it is assumed that the display surface of the display unit is horizontal, and the angle of the pen with respect to the display surface is determined by the direction in which the front side of the input display device is facing and the direction in the axial direction of the
また、以上の例では、ペンの軸方向がいずれの方角を向いているかを示す方角情報を、ペンが加速度センサ及び地磁気センサからの出力に基づいて算出/取得していた。しかし、加速度センサ及び地磁気センサからの出力を角度判定情報としてペンから入力表示装置1に送信し、入力表示装置1が該出力に基づいてペンの軸方向の方角情報を算出/取得するようにしてもよい。
Further, in the above example, the direction information indicating which direction the pen is oriented in the axial direction is calculated / acquired by the pen based on the output from the acceleration sensor and the geomagnetic sensor. However, the output from the acceleration sensor and the geomagnetic sensor is transmitted from the pen to the
(実施例1〜2に関わる付記)
表示部の表示面に対するペンの角度に対応した回転角度を記憶するテーブルTは、ユーザが個別に設定可能であってもよい。ユーザによっては特殊なペンの持ち方をすることもあるからである。
(Additional notes relating to Examples 1 and 2 )
The table T that stores the rotation angle corresponding to the angle of the pen with respect to the display surface of the display unit may be individually set by the user. This is because some users may hold a special pen.
(参考例)
図7は、本発明の参考例の入力表示装置と、該入力表示装置に対する手書き入力に用いられるペンの一例を説明するためのブロック図である。図8は、図7の対応表示回転角度記憶部32aに記憶する情報の一例を説明する図である。
(Reference example)
FIG. 7 is a block diagram for explaining an input display device of a reference example of the present invention and an example of a pen used for handwriting input to the input display device. FIG. 8 is a diagram illustrating an example of information stored in the corresponding display rotation
本例では、ペンを識別するための識別情報であるペンIDが各ペンに割り当てられており、ユーザは、手書き入力する際の入力表示装置1”に対するユーザの位置に応じてペンを使い分ける。
In this example, a pen ID, which is identification information for identifying the pen, is assigned to each pen, and the user properly uses the pen according to the position of the user with respect to the
そのため、ペン2”はペンIDを記憶するペンID記憶部42を備える。
通信部41は、接触検出部22によってペン2”のペン先とタッチパネル12との接触が検知されると、ペンID記憶部42に記憶のペンIDを入力表示装置1に送信する。
Therefore, the
When the
入力表示装置1”の通信部31は、ペンIDをペン2”から受信する。
記憶部32の対応表示回転角度記憶部32aは、ペンIDに対応した手書きイメージの回転角度を予め記憶する。対応表示回転角度記憶部32aは、例えば、図8のテーブルT2のように、ペンID毎に手書きイメージの回転角度を予め記憶する。
The
The corresponding display rotation
入力表示装置1”は、ペン2”から取得されたペンIDに対応する回転角度を、所定のタイミングで対応表示回転角度記憶部32aを参照して取得する。
そして、ペン2”による手書き入力が終了すると、画面制御部13によって、ペン2”による手書きイメージを、上記取得した回転角度分回転させて表示部11に表示させる。
The
Then, when the handwriting input by the
例えば、入力表示装置1”の正面側と反対側からユーザが手書き入力する場合は、ペンIDが“1”のペンをユーザは使用する。このペンを用いてユーザが手書き入力を開始すると、ペンID“1”が入力表示装置1”に送信される。入力表示装置1では、表示回転角度記憶部32aのテーブルT2を参照し、ID“1”に対応する回転角度180°を取得する。そして、手書き入力が終了すると、入力表示装置1では、画面制御部13によって手書きイメージを180°回転させて表示部11に表示させる。
For example, when the user inputs handwriting from the front side and the opposite side of the
以上のようにすることにより、入力表示装置1”においても、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、正面側から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。
By doing the above, even if the
図9は、図7の入力表示装置1”の表示処理を説明するフローチャートである。
図示するように、入力表示装置1”の表示画面に対してペンダウンが行われると(ステップS21)、入力表示装置1”は、タッチパネル12に対するペン2”の接触を検知し、ペンIDをペン2”から通信部31を介して受信する(ステップS22)。受信したペンIDは記憶部32に記憶される。
FIG. 9 is a flowchart illustrating the display process of the
As shown in the figure, when pen down is performed on the display screen of the
そして、入力表示装置1”の制御部10が、タッチパネル12からの出力に基づいて、ユーザがペン2”を動かしたか否か判定する(ステップS23)。
Then, the
ユーザがペン2”を動かしていた場合(YESの場合)、ペン2”の軌跡が描画されるように画面制御部13にてタッチパネル12からの出力に基づいて描画処理してから(ステップS24)、ステップS25へ処理を進める。なお、描画処理に用いられた手書き入力データは、記憶部32に記憶される。
ユーザがペン2”を動かしていない場合(ステップS23、NOの場合)、入力表示装置1はそのままステップS25へ処理を進める。
When the user is moving the
If the user has not moved the
ステップS25では、入力表示装置1”は、ユーザが該装置1”からペン2”を離したか否かを、タッチパネル12からの出力に基づいて判定する。
ペン2”を離していない場合(NOの場合)、入力表示装置1”は処理をステップS23に戻す。ペン2”を離していた場合(YESの場合)、入力表示装置1”はタイムアウト時間を例えば1秒としてタイマを起動する(ステップS26)。
In step S25, the
If the
次に、入力表示装置1”の制御部10がタイムアウトしたか否か判定する(ステップS27)。
タイムアウトしていた場合(YESの場合)、すなわち、ペン2”による手書き入力が終了していた場合、入力表示装置1”は、記憶部32に記憶のペン2”のペンIDに対応する回転角度を、対応表示回転角度記憶部32aのテーブルT2(図7参照)を参照して取得する(ステップS28)。そして、画面制御部13が手書きイメージを取得された回転角度分回転させて、元の手書きイメージに代えて表示部11に表示する(ステップS29)。
Next, it is determined whether or not the
When the time-out has occurred (YES), that is, when the handwriting input by the
ステップS27において、タイムアウトしていなかった場合(NOの場合)、再度ペンダウンされたか否かをタッチパネル12からの出力に基づいて判定する(ステップS30)。ペンダウンしていない場合(NOの場合)、入力表示装置1は処理をステップS27へ戻し、ペンダウンされていた場合(YESの場合)、タイマをクリアし停止してから(ステップS31)、処理をステップS22に戻す。ここでは、再度ペンダウンされた際、ペンIDの再取得を行わない。タイムアウト時間内に、ユーザが場所を続けて描画を行う可能性が高いためである。
In step S27, if the time-out has not occurred (NO), it is determined based on the output from the
なお、ペンIDに応じて手書きイメージの表示色を異ならせてもよい。 The display color of the handwritten image may be different depending on the pen ID.
(実施例1〜2および参考例に関わる付記)
手書きイメージの回転は、該イメージの中心を軸として行うことが好ましい。90°回転させる場合など、回転させた手書きイメージが表示面外にまで及ぶときは、画面制御部によって、表示面内に収まるように該回転させた手書きイメージを縮小させて表示させることが好ましい。
(Additional notes relating to Examples 1 and 2 and Reference Examples)
The rotation of the handwritten image is preferably performed around the center of the image. When the rotated handwritten image extends beyond the display surface, such as when it is rotated by 90 °, it is preferable that the screen control unit reduces the rotated handwritten image so that it fits within the display surface and displays it.
上述の例では、タッチパネルとペン先が接触したか否かに基づいて、ペンダウンすなわち手書き入力を検知していた。しかし、ペン先が完全に接触していなくてもタッチパネルにて所定量以上の静電容量変化が検知された場合には手書き入力されたものとしてもよい。この場合、ペンには上述の接触検出部を設ける必要がなく、傾き情報やペンIDの情報はペン先の接触検出後ではなく定期的にペンから送信される。 In the above example, pen down, that is, handwriting input is detected based on whether or not the touch panel and the pen tip are in contact with each other. However, even if the pen tip is not completely in contact with the pen tip, if a change in capacitance of a predetermined amount or more is detected on the touch panel, it may be input by handwriting. In this case, it is not necessary to provide the pen with the above-mentioned contact detection unit, and the tilt information and the pen ID information are periodically transmitted from the pen, not after the contact detection of the pen tip.
入力表示装置は、情報を表示する表示面を有する表示部と、表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備え、さらに表示面に対するペンの角度を判定する角度判定部と、上記ペンの角度に対応した回転角度を予め記憶する回転角度記憶部と、を備え、ペンによる手書き入力終了後、上記ペンの角度に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示する。これにより、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。 The input display device includes a display unit having a display surface for displaying information, a touch panel for detecting handwritten input by the user's pen on the display surface, and an angle determination unit for determining the angle of the pen with respect to the display surface. It is equipped with a rotation angle storage unit that stores the rotation angle corresponding to the angle of the pen in advance, and after the handwriting input by the pen is completed, the handwriting image based on the handwriting input is rotated by the rotation angle corresponding to the angle of the pen. To display. As a result, regardless of the input content or the horizontal / vertical writing input, the handwritten image based on the handwriting input can be displayed in a direction that is easy to see from a predetermined direction regardless of the handwriting input from any direction.
入力表示装置は、ペンの傾き情報を、当該ペンから受信する傾き情報受信部を備え、角度判定部は、ペンの傾き情報に基づいて、表示面に対するペンの角度を判定するとよい。これにより、表示面に対するペンの角度を正確に判定することができる。 The input display device may include a tilt information receiving unit that receives the tilt information of the pen from the pen, and the angle determination unit may determine the angle of the pen with respect to the display surface based on the tilt information of the pen. As a result, the angle of the pen with respect to the display surface can be accurately determined.
入力表示装置は、右手による手書き入力か左手による手書き入力かを判定する判定部を備え、右手による手書き入力と左手による手書き入力とでは、手書き入力終了後に表示する手書きイメージの回転角度を異ならせるとよい。これにより右手による手書き入力か左手による手書き入力かによらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。 The input display device is equipped with a determination unit for determining whether the handwriting input is performed by the right hand or the left hand. Good. This makes it possible to display a handwritten image based on the handwritten input in a direction that makes it easy to see from a predetermined direction regardless of whether the handwritten input is performed by the right hand or the left hand.
入力表示装置は、情報を表示する表示面を有する表示部と、表示面に対するユーザのペンによる手書き入力を検出するタッチパネルと、を備え、ペンの識別情報に対応した回転角度を記憶する回転角度記憶部と、ペンの識別情報をペンから取得する識別情報取得部と、を備え、ペンによる手書き入力終了後、当該ペンから取得された識別情報に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示する。これにより、いずれの方向から手書き入力された場合でも、入力内容や横書き入力/縦書き入力によらず、所定の方向から見えやすいような向きで手書き入力に基づく手書きイメージを表示することができる。 The input display device includes a display unit having a display surface for displaying information and a touch panel for detecting handwritten input by the user's pen on the display surface, and stores a rotation angle corresponding to the identification information of the pen. A unit and an identification information acquisition unit that acquires the identification information of the pen from the pen are provided, and after the handwriting input by the pen is completed, a handwritten image based on the handwriting input is provided for the rotation angle corresponding to the identification information acquired from the pen. Is rotated and displayed. As a result, regardless of the input content or the horizontal / vertical writing input, the handwritten image based on the handwriting input can be displayed in a direction that is easy to see from a predetermined direction regardless of the handwriting input from any direction.
入力表示装置は、手書きイメージを回転させて表示する際、回転させた手書きイメージが表示面外にまで及ぶ場合、手書きイメージを縮小させて表示するとよい。これにより、手書きイメージ全体を表示することができる。 When the handwritten image is rotated and displayed, the input display device may reduce the handwritten image and display it if the rotated handwritten image extends beyond the display surface. As a result, the entire handwritten image can be displayed.
1,1´,1”…入力表示装置、10…制御部、11…表示部、11a…表示面、12…タッチパネル、13…画面制御部、14,…通信部、15…角度判定部、16,32…記憶部、16a,32a…対応表示回転角度記憶部、2,2´,2”…ペン、20…制御部、21,41…通信部、22…接触検出部、23…傾き情報取得部、42…ペンID記憶部。
1,1', 1 "... input display device, 10 ... control unit, 11 ... display unit, 11a ... display surface, 12 ... touch panel, 13 ... screen control unit, 14, ... communication unit, 15 ... angle determination unit, 16 , 32 ... Storage unit, 16a, 32a ... Corresponding display rotation angle storage unit, 2,2', 2 "... Pen, 20 ... Control unit, 21,41 ... Communication unit, 22 ... Contact detection unit, 23 ... Tilt information acquisition Department, 42 ... Pen ID storage unit.
Claims (6)
前記ペンが前記表示面に接触しているときに前記表示面に対する前記ペンの角度を判定する角度判定部と、
前記ペンの角度に対応した回転角度を予め記憶する回転角度記憶部と、
前記ペンの傾き情報を、当該ペンから受信する傾き情報受信部と、を備え、
前記角度判定部は、前記ペンの傾き情報に基づいて、前記表示面に対する前記ペンの角度を判定し、
前記ペンが前記表示面から離れた前記ペンによる手書き入力終了後、前記ペンの傾き情報に応じた前記ペンの角度に対応する回転角度分、当該手書き入力に基づく手書きイメージを回転させて表示することを特徴とする入力表示装置。 An input display device including a display unit having a display surface for displaying information and a touch panel for detecting handwriting input by a user's pen on the display surface.
An angle determination unit that determines the angle of the pen with respect to the display surface when the pen is in contact with the display surface.
A rotation angle storage unit that stores the rotation angle corresponding to the angle of the pen in advance,
A tilt information receiving unit that receives tilt information of the pen from the pen is provided.
The angle determination unit determines the angle of the pen with respect to the display surface based on the tilt information of the pen.
After the handwriting input by the pen is separated from the display surface, the handwriting image based on the handwriting input is rotated and displayed by the rotation angle corresponding to the angle of the pen according to the tilt information of the pen. An input display device characterized by.
前記入力表示装置は、前記入力表示装置の所定の面が向いている方角を示す、入力表示装置の方角情報を取得する方角情報取得部を備え、
前記角度判定部は、前記ペンの方角情報と、前記入力表示装置の方角情報と、に基づき前記表示面に対する前記ペンの角度を判定することを特徴とする請求項1または2に記載の入力表示装置。 The tilt information is the direction information of the pen, which indicates which direction the axial direction of the pen is facing.
The input display device includes a direction information acquisition unit for acquiring direction information of the input display device, which indicates a direction in which a predetermined surface of the input display device is facing.
The input display according to claim 1 or 2, wherein the angle determination unit determines the angle of the pen with respect to the display surface based on the direction information of the pen and the direction information of the input display device. apparatus.
前記入力表示装置は、地磁気センサを備え、
前記方角情報取得部は、前記入力表示装置の前記地磁気センサの出力に基づいて、前記入力表示装置の方角情報を取得することを特徴とする請求項3に記載の入力表示装置。 The direction information of the pen is information based on the output of the geomagnetic sensor provided on the pen.
The input display device includes a geomagnetic sensor.
The input display device according to claim 3, wherein the direction information acquisition unit acquires direction information of the input display device based on the output of the geomagnetic sensor of the input display device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014114852A JP6757114B2 (en) | 2014-06-03 | 2014-06-03 | Input display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014114852A JP6757114B2 (en) | 2014-06-03 | 2014-06-03 | Input display device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018193130A Division JP6549776B2 (en) | 2018-10-12 | 2018-10-12 | Input display |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015230497A JP2015230497A (en) | 2015-12-21 |
JP6757114B2 true JP6757114B2 (en) | 2020-09-16 |
Family
ID=54887264
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014114852A Active JP6757114B2 (en) | 2014-06-03 | 2014-06-03 | Input display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6757114B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7452155B2 (en) * | 2019-04-11 | 2024-03-19 | 株式会社リコー | Handwriting input device, handwriting input method, program |
US11132122B2 (en) | 2019-04-11 | 2021-09-28 | Ricoh Company, Ltd. | Handwriting input apparatus, handwriting input method, and non-transitory recording medium |
US11733830B2 (en) * | 2019-11-20 | 2023-08-22 | Ricoh Company, Ltd. | Display apparatus for displaying handwritten data with displayed operation menu |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3190074B2 (en) * | 1991-09-11 | 2001-07-16 | 株式会社東芝 | Handwriting input device |
JP3161794B2 (en) * | 1992-03-05 | 2001-04-25 | 松下電器産業株式会社 | Pen input device and pen input method |
JP3239457B2 (en) * | 1992-08-07 | 2001-12-17 | 富士ゼロックス株式会社 | Electronic information drawing device |
JPH06290016A (en) * | 1993-03-31 | 1994-10-18 | Fujitsu Ltd | Display device for face-to-face dealing and its control method |
JPH07319447A (en) * | 1994-05-24 | 1995-12-08 | Toshiba Corp | Picture displaying method and picture processing method |
JPH10105322A (en) * | 1996-09-25 | 1998-04-24 | Sharp Corp | Tablet device, document processor using the same, and medium stored with tablet device control program |
JP3505057B2 (en) * | 1997-02-20 | 2004-03-08 | 株式会社リコー | Pen-type input device |
JP2001100908A (en) * | 1999-09-28 | 2001-04-13 | Fujitsu Ltd | Pen tip trace generating method, pen type input device, and pen mounting unit |
US6603463B1 (en) * | 2000-11-06 | 2003-08-05 | Sony Corporation | Method and an apparatus for electronically creating art |
US20040140962A1 (en) * | 2003-01-21 | 2004-07-22 | Microsoft Corporation | Inertial sensors integration |
KR100501721B1 (en) * | 2003-03-19 | 2005-07-18 | 삼성전자주식회사 | Pen-shaped input device using magnetic sensor and method thereof |
US8542219B2 (en) * | 2004-01-30 | 2013-09-24 | Electronic Scripting Products, Inc. | Processing pose data derived from the pose of an elongate object |
JP2008311742A (en) * | 2007-06-12 | 2008-12-25 | Canon Inc | Imaging apparatus, its control method and program, and storage medium |
JP2011113128A (en) * | 2009-11-24 | 2011-06-09 | Sharp Corp | Pen tablet input device and input method using the same |
JP2012003586A (en) * | 2010-06-18 | 2012-01-05 | Brother Ind Ltd | Input device, input system, and input control program |
JP2013242819A (en) * | 2012-05-23 | 2013-12-05 | Hitachi Consumer Electronics Co Ltd | Pen type input device |
JP2014241005A (en) * | 2013-06-11 | 2014-12-25 | 株式会社東芝 | Display controller, display control method, and display control program |
-
2014
- 2014-06-03 JP JP2014114852A patent/JP6757114B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2015230497A (en) | 2015-12-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6039343B2 (en) | Electronic device, control method of electronic device, program, storage medium | |
US10409395B2 (en) | Method for determining display orientation and electronic apparatus using the same and computer readable recording medium | |
US9886107B2 (en) | Information processing apparatus, information processing method, and program | |
JP6757114B2 (en) | Input display device | |
JP6359862B2 (en) | Touch operation input device, touch operation input method, and program | |
EP3652630A1 (en) | User interface for digital ink modification | |
JP2015011586A (en) | Information presentation device, information presentation system, information presentation method and program | |
JP5606635B1 (en) | Electronic device, correction method, and program | |
JP2013175113A (en) | Information processing device, information processing method and program | |
US9659167B2 (en) | Handheld electronic device and method for entering password thereof | |
JP6549776B2 (en) | Input display | |
EP3125089B1 (en) | Terminal device, display control method, and program | |
JP5882270B2 (en) | Information processing apparatus and program | |
JP6201282B2 (en) | Portable electronic device, its control method and program | |
JP5827695B2 (en) | Information processing apparatus, information processing method, program, and information storage medium | |
JPWO2013022000A1 (en) | Electronics | |
TWI620099B (en) | Method for determining display orientation and electronic apparatus using the same and computer readable recording medium | |
JP5175503B2 (en) | Electronic board system | |
JP2016035664A (en) | Input display device | |
JP5972082B2 (en) | Information processing apparatus, display method, and program | |
JP2016157180A (en) | Handwriting input device | |
US20180329583A1 (en) | Object Insertion | |
JP2014235437A (en) | Display device and program | |
JP6497266B2 (en) | Erase medium and handwriting input system | |
JP6296547B2 (en) | Portable information processing apparatus and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180219 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180717 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181012 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20181022 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20181102 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20191212 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20191219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200828 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6757114 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |