JP2019109571A - Display apparatus and input apparatus - Google Patents

Display apparatus and input apparatus Download PDF

Info

Publication number
JP2019109571A
JP2019109571A JP2017240383A JP2017240383A JP2019109571A JP 2019109571 A JP2019109571 A JP 2019109571A JP 2017240383 A JP2017240383 A JP 2017240383A JP 2017240383 A JP2017240383 A JP 2017240383A JP 2019109571 A JP2019109571 A JP 2019109571A
Authority
JP
Japan
Prior art keywords
display
input
unit
control unit
operation load
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017240383A
Other languages
Japanese (ja)
Inventor
裕次 三井
Yuji Mitsui
裕次 三井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tokai Rika Co Ltd
Original Assignee
Tokai Rika Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tokai Rika Co Ltd filed Critical Tokai Rika Co Ltd
Priority to JP2017240383A priority Critical patent/JP2019109571A/en
Publication of JP2019109571A publication Critical patent/JP2019109571A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

To provide a display apparatus and an input apparatus capable of accurately performing an input operation in a handwritten input by a remote control.SOLUTION: A display apparatus 1 is configured to include a display unit 10, an input unit 20 having a touch pad 22 that detects a touch position and acquires a position corresponding to the display unit 10 by a remote control and a load sensor 24 that acquires an operation load of the touch pad 22 when acquiring the position, and a control unit 30 having a display control unit 34 that controls display by changing a display mode to the display unit 10 on the basis of the operation load. With the operation load, a pushing force from a finger is detected, and a character input and a pointer display are separated by a strength and a timing of the pushing force.SELECTED DRAWING: Figure 1

Description

本発明は、表示装置、及び入力装置に関する。   The present invention relates to a display device and an input device.

従来、検出手段としてのタッチパッドと、検出手段で入力された手書き文字を表示する表示部と、タッチパッドで入力された手書き文字入力情報を判別する文字判別手段を備えた、車両用入力装置が開示されている(例えば、特許文献1参照)。   Conventionally, a vehicle input device comprising a touch pad as a detecting means, a display unit for displaying handwritten characters inputted by the detecting means, and a character judging means for judging handwritten character input information inputted by the touch pad For example, Patent Document 1 discloses the disclosure.

この車両用入力装置におけるタッチパッドは、ブラインド操作が可能である。つまり、運転者は、表示部に表示されている操作メニューを見ながら、入力装置をブラインド操作して、各機器を操作できる。タッチパッド上における運転者の指先動作は、静電容量の変化に基づき検出される。具体的には、タッチパッド上における指先の接触位置や、タッチパッド上を指先でなぞった時の指先軌跡が検出される。これにより、タッチパッドで遠隔操作により表示部に手書き文字を表示しながら入力して、文字入力できる車両用入力装置が可能になるとされている。   The touch pad in this vehicle input device is capable of blind operation. That is, the driver can operate each device by operating the input device blindly while viewing the operation menu displayed on the display unit. The driver's fingertip motion on the touch pad is detected based on the change in capacitance. Specifically, the contact position of the fingertip on the touch pad, and the fingertip locus when the fingertip is traced on the touch pad are detected. As a result, it is supposed that a vehicle input device capable of character input can be performed by displaying while displaying handwritten characters on the display unit by remote control with the touch pad.

特開2015−207167号公報JP, 2015-207167, A

しかし、従来技術では、手書き文字の入力が、タッチパッド上における指先の接触位置や指先でなぞった時の指先軌跡に基づいて検出される構成とされている。タッチパッド上の入力状態を表示部に表示しながら手書き文字の入力を行なおうとすると、例えば、文字の第一画目の開始位置が正確に狙えない、第二画目の開始位置が第一画目の開始位置に正確に合わせられない、等の問題が生じる。   However, in the prior art, the input of the handwritten character is detected based on the touch position of the fingertip on the touch pad and the fingertip trajectory when tracing with the fingertip. If you try to input handwritten characters while displaying the input status on the touch pad on the display unit, for example, the start position of the first stroke of the character can not be aimed exactly, the start position of the second stroke is the first There is a problem that the start position of the stroke can not be accurately adjusted.

したがって、本発明の目的は、遠隔操作の手書き入力において、正確な入力操作が可能な表示装置、及び入力装置を提供することにある。   Therefore, an object of the present invention is to provide a display device and an input device capable of performing accurate input operation in handwriting input by remote control.

[1]上記目的を達成するため、表示部と、タッチ位置を検出して遠隔操作により前記表示部に対応する位置取得を行なうタッチパッドと、前記位置取得時の前記タッチパッドの操作荷重を取得する荷重検出部とを備えた入力部と、前記操作荷重に基づいて、前記表示部への表示態様を変更して表示制御する表示制御部を備えた制御部と、を有する表示装置を提供する。
[2]前記表示制御部は、前記操作荷重が第1閾値以下の場合には前記タッチ位置を前記表示部にポインタ表示し、前記操作荷重が前記第1閾値を超える場合には前記ポインタ表示を消去して前記タッチ位置を前記表示部に入力表示する、上記[1]に記載の表示装置であってもよい。
[3]また、前記表示制御部は、前記表示部に入力表示を行なう場合に、操作荷重がゼロ(タッチオフ)になった場合に、前記入力表示を終了する、上記[1]又は[2]に記載の表示装置であってもよい。
[4]また、前記表示制御部は、前記表示部に入力表示を行なう場合に、操作荷重が前記第1閾値より小さい第2閾値以下になった場合に、前記入力表示を終了する、上記[1]又は[2]に記載の表示装置であってもよい。
[5]また、前記制御部は、前記表示態様に応じて、前記タッチ位置の入力制御を行なう入力制御部を有する、上記[1]から[4]のいずれか1に記載の入力装置であってもよい。
[6]また、前記制御部は、前記入力制御部により入力された文字の手書き文字判別を行なう文字判別部を有する、上記[5]に記載の入力装置であってもよい。
[1] In order to achieve the above object, a display unit, a touch pad which detects a touch position and performs position acquisition corresponding to the display unit by remote control, and an operation load of the touch pad at the time of position acquisition And a control unit including a display control unit that performs display control by changing a display mode on the display unit based on the operation load. .
[2] The display control unit displays the touch position on the display unit as a pointer when the operation load is equal to or less than a first threshold, and displays the pointer when the operation load exceeds the first threshold. The display device according to [1], wherein the touch position is erased and displayed on the display unit may be used.
[3] Further, when the input control is performed on the display unit, the display control unit terminates the input display when the operation load becomes zero (touch off), the above-mentioned [1] or [2] It may be a display device described in.
[4] Further, when the input control is performed on the display unit, the display control unit ends the input display when the operation load is equal to or less than a second threshold smaller than the first threshold, It may be the display device according to 1] or [2].
[5] The input device according to any one of [1] to [4], wherein the control unit has an input control unit that performs input control of the touch position according to the display mode. May be
[6] Further, the control unit may be the input device according to the above-mentioned [5], including a character determination unit that performs handwritten character determination of characters input by the input control unit.

本発明の表示装置、及び入力装置によれば、遠隔操作の手書き入力において、正確な入力操作を可能とすることができる。   According to the display device and the input device of the present invention, it is possible to enable accurate input operation in remotely operated handwriting input.

図1(a)は、本発明の実施の形態に係る表示装置、入力装置の全体構成図であり、図1(b)は、図1(a)における入力部をA方向から見た側面図である。Fig.1 (a) is a whole block diagram of the display apparatus which concerns on embodiment of this invention, and an input device, FIG.1 (b) is the side view which looked at the input part in Fig.1 (a) from A direction. It is. 図2は、操作時間(操作の流れ)と操作荷重との関係を示す一例であり、第1閾値を超えたところから操作荷重がゼロ(タッチオフ)になるところまでを文字入力とすることを表す第1の実施の形態に係る操作時間と操作荷重の関係図である。FIG. 2 is an example showing the relationship between the operation time (flow of operation) and the operation load, and represents that from the point where the first threshold is exceeded to the point where the operation load becomes zero (touch off) is character input It is a related figure of operation time and operation load concerning a 1st embodiment. 図3(a)は、文字入力表示部に表示されたポインタとその移動を説明する表示部の図、図3(b)は、図3(a)で示すポインタの操作を説明するタッチパッドの図、図3(c)は、文字入力表示部に表示された入力表示と第一画、第二画の始点、終点を説明する表示部の図、図3(d)は、図3(c)で示すタッチ位置と文字入力の位置関係を説明するタッチパッドの図である。FIG. 3 (a) is a view of a pointer displayed on the character input display unit and a display unit for explaining the movement thereof, and FIG. 3 (b) is a touch pad for explaining the operation of the pointer shown in FIG. FIG. 3 (c) is a diagram of the input display displayed on the character input display unit and a display unit for explaining the start point and the end point of the first image and the second image, and FIG. 3 (d) is FIG. It is a figure of the touch pad explaining the touch position shown by and the positional relationship of character input. 図4は、操作時間(操作の流れ)と操作荷重との関係を示す一例であり、第1閾値を超えたところから操作荷重が第2閾値以下になるところまでを文字入力とすることを表す第2の実施の形態に係る操作時間と操作荷重の関係図である。FIG. 4 is an example showing the relationship between the operation time (flow of operation) and the operation load, and represents that character input is from the point where the first threshold is exceeded to the point where the operation load becomes equal to or less than the second threshold. It is a related figure of operation time and operation load concerning a 2nd embodiment. 図5(a)、(b)は、一筆書きの手書き文字入力の一例である。FIGS. 5A and 5B show an example of one-stroke handwritten character input.

(本発明の第1の実施の形態)
本発明の実施の形態に係る表示装置1は、表示部10と、タッチ位置を検出して遠隔操作により表示部10に対応する位置取得を行なうタッチパッド22と、位置取得時のタッチパッド22の操作荷重を取得する荷重検出部である荷重センサ24とを備えた入力部20と、操作荷重に基づいて、表示部10への表示態様を変更して表示制御する表示制御部34を備えた制御部30と、を有して構成されている。
First Embodiment of the Present Invention
The display device 1 according to the embodiment of the present invention includes a display unit 10, a touch pad 22 that detects a touch position and performs position acquisition corresponding to the display unit 10 by remote control, and a touch pad 22 at the time of position acquisition. Control provided with an input unit 20 including a load sensor 24 which is a load detection unit for acquiring an operation load, and a display control unit 34 for performing display control by changing a display mode on the display unit 10 based on the operation load And a unit 30.

(表示部10)
表示部10は、図1(a)に示すように、例えば、メニュー画面が表示され、入力部20により遠隔操作されて、アイコン選択、画面表示の変更、入力確定、入力処理等ができ、また、文字入力表示部11に手書き文字の表示が可能とされている。表示部10が例えば車両に装着される場合は、車両のインストルメントパネルに装着される。表示部10は、例えば、TFT(Thin Film Transistor)型等の周知の液晶ディスプレイである。この表示部10は、制御部30に接続され、制御部30から出力される表示信号Sに基づいて表示制御される。
(Display unit 10)
As shown in FIG. 1A, for example, a menu screen is displayed on the display unit 10, and is remotely operated by the input unit 20, and icon selection, screen display change, input confirmation, input processing, etc. can be performed. The character input display unit 11 can display handwritten characters. For example, when the display unit 10 is mounted on a vehicle, the display unit 10 is mounted on an instrument panel of the vehicle. The display unit 10 is, for example, a known liquid crystal display such as a TFT (Thin Film Transistor) type. The display unit 10 is connected to the control unit 30, and display control is performed based on the display signal SD output from the control unit 30.

表示部10は、図1(a)に示すように、左上が原点Oのワールド座標X、Yとされ、文字入力表示部11は、原点O´のローカル座標X´、Y´とされている。この文字入力表示部11のローカル座標X´、Y´は、タッチパッド22(入力部20)の座標x、yに対応するものであり、スケール変換された絶対座標値により、タッチパッド22上の点が文字入力表示部11に表示可能とされている。   In the display unit 10, as shown in FIG. 1A, the upper left is set to world coordinates X and Y of the origin O, and the character input display unit 11 is set to local coordinates X 'and Y' of the origin O '. . The local coordinates X ′ and Y ′ of the character input display unit 11 correspond to the coordinates x and y of the touch pad 22 (input unit 20), and are scaled on the touch pad 22 by the absolute coordinate values converted. A point can be displayed on the character input display unit 11.

(入力部20)
入力部20は、図1(a)、(b)に示すように、タッチパッド22と、タッチパッド22への操作荷重を検出する荷重センサ24から構成されている。タッチパッド22は、ベース50に載置された荷重センサ24上に配置されている。入力部20は、例えば、車両の場合は、ベースとしてのセンターコンソール等に装着される。
(Input unit 20)
As shown in FIGS. 1A and 1B, the input unit 20 includes a touch pad 22 and a load sensor 24 that detects an operation load on the touch pad 22. The touch pad 22 is disposed on the load sensor 24 mounted on the base 50. For example, in the case of a vehicle, the input unit 20 is mounted on a center console or the like as a base.

タッチパッド22は、表示部10と対応した2次元座標が検出可能な、例えば、静電容量方式の2次元タッチセンサである。タッチパッド22は、タッチパッド22上の指等によるタッチ位置を検出して、タッチ位置信号Sとして制御部30へ出力する。 The touch pad 22 is, for example, a capacitive two-dimensional touch sensor capable of detecting two-dimensional coordinates corresponding to the display unit 10. The touch pad 22 detects a touch position by a finger or the like on the touch pad 22, and outputs the touch position signal SP to the control unit 30.

また、荷重センサ24は、例えば、静電容量方式、圧電式の荷重センサである。荷重センサ24は、タッチパッド22への操作荷重、押圧荷重をタッチパッド22の下部の、例えば、四隅に配置された荷重センサの平均値として検出し、これを操作荷重信号Sとして制御部30へ出力する。なお、荷重センサ24は、少なくとも1つ備えていればよい。 The load sensor 24 is, for example, an electrostatic capacitance type or piezoelectric type load sensor. Load sensor 24, the operation load of the touch pad 22, the bottom of the touch pad 22 to pressure load, for example, detected as the average value of the load sensor located at the four corners, the control unit 30 so as operation load signal S L Output to Note that at least one load sensor 24 may be provided.

(制御部30)
制御部30は、記憶部32、表示制御部34、入力制御部36、文字判別部38等を備えた例えばマイクロコンピュータで構成されている。制御部30は、記憶されたプログラムに従って、取得したデータに演算、加工などを行うCPU(Central Processing Unit)、半導体メモリであるRAM(Random Access Memory)及びROM(Read Only Memory)などから構成される。なお、制御部30は、図1(a)に示すように、記憶部32、表示制御部34等が一体に構成されている必要はない。例えば、記憶部32は外部メモリを用いる、表示制御部34は外部の画像処理チップを用いる、等の構成であってもよい。
(Control unit 30)
The control unit 30 is configured by, for example, a microcomputer including a storage unit 32, a display control unit 34, an input control unit 36, a character determination unit 38, and the like. The control unit 30 includes a central processing unit (CPU) that performs computations and processing on acquired data according to a stored program, a random access memory (RAM) that is a semiconductor memory, a read only memory (ROM), and the like. . In addition, as the control part 30 is shown to Fig.1 (a), the memory | storage part 32, the display control part 34 grade | etc., Do not need to be comprised integrally. For example, the storage unit 32 may use an external memory, and the display control unit 34 may use an external image processing chip.

記憶部32には、本実施形態に係る表示装置、入力装置を動作させるためのプログラム、後述する第1閾値Sth1、第2閾値Sth2が記憶されている。また、記憶部32には、文字データ(漢字、かな、カナ、アルファベト、記号等)が文字コードと共に予め記憶され、制御部30が必要に応じて参照可能とされている。 The storage unit 32 stores a display device according to the present embodiment, a program for operating the input device, and a first threshold S th1 and a second threshold S th2 described later. In addition, character data (kanji, kana, kana, alphabet, symbols, etc.) are stored in advance in the storage unit 32 together with the character code, and the control unit 30 can be referred to as necessary.

表示制御部34は、タッチパッド22から取得したタッチ位置信号Sと、荷重センサ24から取得した操作荷重Sとに基づいて、マイクロコンピュータの処理、演算機能を使用して、表示部10への表示態様を変更して表示制御する。ここで、表示態様を変更して表示制御するとは、操作荷重Sの値に応じて、タッチ位置信号Sに対応する表示部10上の位置に、ポインタ表示を行なうか入力表示を行なうかを制御することである。なお、ポインタ表示は、矢印やカーソル等の位置を示すマークである。また、入力表示とは、実際に位置入力される位置を示す点、線等で、これらの点、線が連続的に表示される軌跡も含まれる。 The display control unit 34, a touch position signal S P acquired from the touch pad 22, on the basis of the operation load S L obtained from the load sensor 24, the processing of the microcomputer, using the calculation function, the display unit 10 Control the display by changing the display mode of. Here, whether to display control by changing the display mode, depending on the value of the operation load S L, the position on the display unit 10 corresponding to the touch position signal S P, to input display or perform pointer display To control. The pointer display is a mark indicating the position of an arrow or a cursor. Further, the input display is a point, a line, or the like that indicates the position where the position is actually input, and also includes a locus in which these points and the line are continuously displayed.

具体的には、図2に示すように、表示制御部34は、操作荷重Sが第1閾値Sth1以下の場合にはタッチ位置を表示部10にポインタ表示し、操作荷重Sが第1閾値Sth1を超える場合にはポインタ表示を消去してタッチ位置を表示部10に入力表示する。 Specifically, as shown in FIG. 2, the display control unit 34, pointer display and a touch position on the display unit 10 when the operation load S L is equal to or smaller than the first threshold value S th1, the operation load S L is the If the threshold value S th1 is exceeded, the pointer display is erased and the touch position is input and displayed on the display unit 10.

また、第1の実施の形態では、表示制御部34は、表示部10に入力表示を行なう場合に、操作荷重Sがゼロ(タッチオフ)になった場合に、入力表示を終了する。 In the first embodiment, the display control unit 34, when performing input on the display unit 10, when the operation load S L is zero (touch-off), and ends the input display.

(入力装置としての実施形態)
上記説明した制御部30は、上記の表示態様に応じて、タッチ位置の入力制御を行なう入力制御部36を有する入力装置、も本発明の実施の形態の一つである。ここで、タッチ位置の入力制御とは、入力制御部36において、操作荷重Sが第1閾値Sth1を超える場合にタッチ位置を取得する(制御部30に入力する)ものである。取得されたタッチ位置は、例えば、手書き文字を形成する。この手書き文字は、文字判別部38において、文字判別が実行される。また、この入力装置は、入力制御部36により入力された文字の手書き文字判別を行なう文字判別部38を有する。
(Embodiment as an input device)
The control unit 30 described above is an input device having an input control unit 36 that performs input control of a touch position in accordance with the display mode described above, which is one of the embodiments of the present invention. Here, the input control of the touch position, the input control unit 36, the operation load S L is (input to the control unit 30) acquires the touch position when exceeding a first threshold value S th1 those. The acquired touch position forms, for example, handwritten characters. Character discrimination is performed in the character discrimination unit 38 for this handwritten character. The input device also includes a character determination unit 38 that determines handwritten characters of characters input by the input control unit 36.

入力制御部36は、上記の入力表示がされている場合に、入力表示されたタッチ位置を取得する入力制御を行なう。   The input control unit 36 performs input control for acquiring the touch position that is input and displayed when the above-described input display is performed.

文字判別部38は、入力制御部36により入力された文字の手書き文字判別を行なう。文字判別部38は、入力制御部36により入力された文字の手書き文字と、記憶部32に記憶された文字データ(漢字、かな、カナ、アルファベト、記号等)を特徴抽出、識別処理を行なうことにより手書き文字判別を行なう。特徴抽出としては、拡張セル特徴方式、加重方向ヒストグラム方式、外郭方向寄与度特徴方式等の方式がある。また、識別処理としては、シティブロック距離方式、ユークリッド距離方式、線形識別関数方式、部分空間法、KNN法、ベイズ識別法、ニューラルネットによる方法等がある。本実施の形態に係る制御部30は、記憶部32の文字データ(漢字、かな、カナ、アルファベト、記号等)、文字コードを参照しながら、これら公知の特徴抽出、識別処理方式による手書き文字の判別を行なうことができる。   The character discrimination unit 38 performs handwritten character discrimination of the characters input by the input control unit 36. The character discrimination unit 38 performs feature extraction and identification processing of handwritten characters of characters input by the input control unit 36 and character data (kanji, kana, kana, alphabet, symbols, etc.) stored in the storage unit 32. It performs handwritten character discrimination. As feature extraction, there are methods such as an extended cell feature method, a weighted direction histogram method, and an outline direction contribution feature method. Further, as the identification processing, there are a city block distance method, an Euclidean distance method, a linear identification function method, a subspace method, a KNN method, a Bayesian identification method, a method using a neural network, and the like. The control unit 30 according to the present embodiment refers to the character data (kanji, kana, kana, alphabet, symbols, etc.) of the storage unit 32 and the character code while referring to the character code and the handwritten character by the known feature extraction and identification processing method. Can be determined.

図2は、操作時間(操作の流れ)と操作荷重との関係を示す一例であり、第1閾値Sth1を超えたところから操作荷重がゼロ(タッチオフ)になるところまでを文字入力とすることを表す第1の実施の形態に係る操作時間と操作荷重の関係図である。 FIG. 2 is an example showing the relationship between the operation time (flow of operation) and the operation load, and from the point where the first threshold value S th1 is exceeded to the point where the operation load becomes zero (touch off) is character input It is a related figure of operation time and operation load concerning a 1st embodiment showing a.

操作時間tにおいて、タッチパッド22へタッチオンし、操作を開始する。操作時間tまでの間は、操作荷重Sが第1閾値Sth1以下であって、表示制御部34により、表示部10の文字入力表示部11に、タッチ位置が表示部10にポインタ表示される。すなわち、図3(a)に示すように、ポインタ100が点DからDの間で表示される。 In operating time t 1, it starts touching the touch pad 22, to start the operation. Until the operation time t 2, the operation load S L is equal to or lower than the first threshold value S th1, the display control unit 34, the character input display unit 11 of the display unit 10, pointer display touch position on the display unit 10 Be done. That is, as shown in FIG. 3 (a), the pointer 100 is displayed between the point D 1 of the D 2.

操作時間tにおいて、操作荷重Sが第1閾値Sth1を超えたので、表示制御部34は、ポインタ表示を消去して、図3(c)に示すように、文字入力表示部11に、タッチ位置の入力表示を行なう。操作荷重Sが第1閾値Sth1を下回っても、操作荷重Sがゼロ(タッチオフ)になるまでは入力表示が継続される。 Since the operation load S L exceeds the first threshold value S th1 at the operation time t 2 , the display control unit 34 erases the pointer display, and as shown in FIG. , Input display of touch position. Even if the operation load S L falls below the first threshold value S th1 , the input display is continued until the operation load S L becomes zero (touch off).

操作時間tにおいて、操作荷重Sがゼロ(タッチオフ)になることで、表示制御部34は、入力表示を停止する。 In operating time t 3, by operation load S L becomes zero (touch-off), the display control unit 34 stops the input display.

図2に示すように、操作時間tからtの操作において、第一画の文字入力がされる。入力制御部36は、この第一画の文字入力を制御部30に入力する。 As shown in FIG. 2, the operation of t 3 from the operation time t 2, the character input of the first stroke is. The input control unit 36 inputs the character input of the first image to the control unit 30.

以降、同様の手順により、第二画、第三画、・・・・、と文字入力を制御部30に入力する。表示制御部34は、操作荷重Sに基づいて、表示部10への表示態様を変更して表示制御を行なう。また、入力制御部36は、入力表示の位置取得を行なうことにより、例えば、図3(c)に示すように、手書き文字「馬」を取得することができる。 Thereafter, the second and third strokes are input to the control unit 30 in the same manner. The display control unit 34 based on the operation load S L, performs display control to change the display mode of the display unit 10. Further, the input control unit 36 can acquire the handwritten character “horse”, for example, as shown in FIG. 3C, by acquiring the position of the input display.

(表示装置、入力装置の動作)
表示装置、入力装置の動作として、図3(a)から(d)に示すような、「馬」の文字入力で説明する。図3(b)、(d)で示すように、タッチパッド22のP点に指先等でタッチする。第一画となるP点まで、第1閾値Sth1を超えない操作荷重Sで指先等移動させる。この操作に対応して、図3(a)に示すように、表示制御部34により、ポインタ100が点DからDまで移動する。
(Operation of display device and input device)
The operation of the display device and the input device will be described by the character input of "horse" as shown in FIGS. 3 (a) to 3 (d). FIG. 3 (b), the as shown in (d), touch a fingertip or the like P 1 point of the touch pad 22. The fingertip or the like is moved with an operation load S L that does not exceed the first threshold value S th1 up to the point P 2 that is the first image. In response to this operation, as shown in FIG. 3 (a), the display control unit 34, the pointer 100 moves from point D 1 to D 2.

点Dを手書き文字の第一画とするため、第1閾値Sth1を超える操作荷重Sとして入力操作する。表示制御部34は、図3(c)で示すように、点Pを点Dとして入力表示する。図3(d)で示すように、点Pから点Pまで指先を移動させ、点Pでタッチオフする。これにより、点Dから点Dである手書き文字の第一画、すなわち、図3(c)で示す「馬」の第一画の縦棒が表示される。また、この第一画は、入力制御部36により、制御部30に入力される。 To the point D 2 and the first stroke of handwriting, an input operation as the operation load S L exceeds the first threshold value S th1. The display control unit 34, as shown in FIG. 3 (c), the input display point P 2 as a point D 2. As shown in FIG. 3 (d), the moving the fingertip from point P 2 to the point P 3, to touch-off at point P 3. Thus, the first stroke of handwriting from point D 2 is a point D 3, i.e., a vertical bar of the first stroke of the "horse" shown in FIG. 3 (c) is displayed. The first image is also input to the control unit 30 by the input control unit 36.

図3(d)で示すように、タッチオフした指を点Pに再びタッチさせる。操作荷重Sが第1閾値Sth1以下である場合は、ポインタ100が表示される。操作者は、このポインタ100を見ながらタッチパッド22上を指先でなぞり、第二画の始点Pに移動させる。 As shown in FIG. 3 (d), the is again touched touch-off finger over the point P 4. When the operation load S L is equal to or less than the first threshold value S th1 , the pointer 100 is displayed. Operator tracing on the touch pad 22 with a fingertip while observing the pointer 100 is moved to the start point P 5 of the second stroke.

点Pに対応する点Dを手書き文字の第二画とするため、第1閾値Sth1を超える操作荷重Sとして入力操作する。表示制御部34は、図3(c)で示すように、点Pを入力表示する。図3(d)で示すように、点Pから点Pまで指先を移動させ、点Pでタッチオフする。これにより、点Dから点Dである手書き文字の第二画、すなわち、図3(c)で示す「馬」の第二画の横棒が表示される。本実施の形態によれば、この第一画の始点と第二画の始点を一致させることができる。また、この第二画は、入力制御部36により、制御部30に入力される。 To the D 5 point corresponding to the point P 5 and the second stroke of handwriting, an input operation as the operation load S L exceeds the first threshold value S th1. The display control unit 34, as shown in FIG. 3 (c), the input display the points P 5. As shown in FIG. 3 (d), the moving the fingertip from the point P 5 to the point P 6, to touch-off at point P 6. Thus, the second stroke from the point D 5 of handwriting is point D 6, i.e., horizontal bar of the second stroke of "horse" shown in FIG. 3 (c) is displayed. According to the present embodiment, the start point of the first image and the start point of the second image can be made to coincide. The second image is also input to the control unit 30 by the input control unit 36.

このような手順により、手書き文字の第一画の始点と終点、第二画の始点と終点、・・・を入力することができる。これにより、図3(d)で示すように、表示制御部34は、各画の始点、終点が狙い通りの位置にあるきれいな手書き文字が入力表示できる。また、この表示に基づいて入力制御部36は、高い判別精度が期待できる手書き文字、例えば、図3(c)で示す「馬」の文字を取得する入力制御を行なうことができる。   According to such a procedure, it is possible to input the start point and end point of the first image of the handwritten character, the start point and end point of the second image,. As a result, as shown in FIG. 3D, the display control unit 34 can input and display a beautiful handwritten character in which the start point and the end point of each image are at the target positions. Further, based on this display, the input control unit 36 can perform input control for acquiring handwritten characters that can be expected to have high discrimination accuracy, for example, the character of "horse" shown in FIG. 3 (c).

(第2の実施の形態)
第2の実施の形態は、表示制御部34は、図4に示すように、第1閾値Sth1と第2閾値Sth2により、ポインタ表示と入力表示を切り替えて、表示態様を変更する。他の構成は第1の実施の形態と同様であり、以下、異なる構成、動作について説明する。
Second Embodiment
In the second embodiment, as shown in FIG. 4, the display control unit 34 switches the pointer display and the input display according to the first threshold value S th1 and the second threshold value S th2 to change the display mode. The other configuration is the same as that of the first embodiment, and different configurations and operations will be described below.

具体的には、図4に示すように、表示制御部34は、操作荷重Sが第1閾値Sth1以下の場合にはタッチ位置を表示部10にポインタ表示し、操作荷重Sが第1閾値Sth1を超える場合にはポインタ表示を消去してタッチ位置を表示部10に入力表示する。 Specifically, as shown in FIG. 4, the display control unit 34, pointer display and a touch position on the display unit 10 when the operation load S L is equal to or smaller than the first threshold value S th1, the operation load S L is the If the threshold value S th1 is exceeded, the pointer display is erased and the touch position is input and displayed on the display unit 10.

第2の実施の形態では、表示制御部34は、操作荷重Sが第2閾値Sth2以下になった場合に、入力表示を終了する。 In the second embodiment, the display control unit 34, when the operation load S L becomes the second threshold value S th2 below, it ends the input display.

入力制御部36は、上記の入力表示がされている場合に、入力表示されたタッチ位置を取得する入力制御を行なう。   The input control unit 36 performs input control for acquiring the touch position that is input and displayed when the above-described input display is performed.

図4は、操作時間(操作の流れ)と操作荷重との関係を示す一例であり、第1閾値Sth1を超えたところから操作荷重が第2閾値Sth2以下になるところまでを文字入力とすることを表す第2の実施の形態に係る操作時間と操作荷重の関係図である。 FIG. 4 is an example showing the relationship between the operation time (flow of operation) and the operation load, and from the point where the first threshold value S th1 is exceeded to the point where the operation load becomes less than the second threshold value S th2 It is a related view of operation time and operation load concerning a 2nd embodiment showing that it does.

操作時間t10において、タッチパッド22へタッチオンし、操作を開始する。操作時間t11までの間は、操作荷重Sが第1閾値Sth1以下であって、表示制御部34により、表示部10の文字入力表示部11に、タッチ位置がポインタ表示される。すなわち、図3で示したような、ポインタ100が表示される。 In operation the time t 10, and touch-on to touch pad 22, to start the operation. Until the operation time t 11, the operation load S L is equal to or lower than the first threshold value S th1, the display control unit 34, the character input display unit 11 of the display unit 10, the touch position is pointer display. That is, the pointer 100 as shown in FIG. 3 is displayed.

操作時間t11において、操作荷重Sが第1閾値Sth1を超えたので、表示制御部34は、ポインタ表示を消去して、文字入力表示部11に、タッチ位置の入力表示を行なう。操作荷重Sが第1閾値Sth1を下回っても、第2閾値Sth2以下になるまでは入力表示が継続される。 In operation the time t 11, since the operation load S L exceeds the first threshold value S th1, the display control unit 34 erases the pointer display, the character input display unit 11, performs the input display of the touch position. Even if the operation load S L falls below the first threshold value S th1 , the input display is continued until it becomes equal to or less than the second threshold value S th2 .

図4に示すように、操作荷重Sが第2閾値Sth2以下になると、タッチ位置が表示部10にポインタ表示される。 As shown in FIG. 4, when the operation load S L becomes equal to or less than the second threshold value S th2 , the touch position is displayed on the display unit 10 as a pointer.

図4に示すように、第1閾値Sth1と第2閾値Sth2により、ヒステリシスを持たせているので、第1閾値Sth1を境にして操作荷重Sが変動しても、ポインタ表示と入力表示が煩雑に変化することがない。 As shown in FIG. 4, since hysteresis is given by the first threshold value S th1 and the second threshold value S th2 , even if the operation load S L fluctuates with the first threshold value S th1 as a boundary, pointer display Input display does not change complicatedly.

以降、同様の手順により、表示制御部34は、操作時間t12〜t13の間でポインタ表示、操作時間t13〜t14の間で入力表示、・・・・、と操作荷重に基づいて、表示部10への表示態様を変更して表示制御する。 Thereafter, by the same procedure, the display control unit 34, pointer display between operating time t 12 ~t 13, input display between operating time t 13 ~t 14, based on ..., the operation load , Change the display mode on the display unit 10 to perform display control.

また、入力制御部36は、上記の入力表示がされている場合に、入力表示されたタッチ位置を取得する(制御部30に入力する)。   Further, when the above-mentioned input display is performed, the input control unit 36 acquires the input and displayed touch position (input to the control unit 30).

第2の実施の形態では、上記説明したように、第1閾値Sth1と第2閾値Sth2により、ヒステリシスを持たせているので、いわゆる一筆書きのような複数画の文字入力にも対応することが可能になる。 In the second embodiment, as described above, since the hysteresis is given by the first threshold value S th1 and the second threshold value S th2 , it also corresponds to so-called single-stroke character input. It becomes possible.

図5(a)、(b)は、一筆書きの手書き文字入力の一例である。図5(b)に示すように、タッチパッド22上において、点Qから点Qまで、指先を接触させたまま、一筆書きの要領で例えば、「三」の文字を入力することができる。 FIGS. 5A and 5B show an example of one-stroke handwritten character input. As shown in FIG. 5 (b), on the touch pad 22, from the point Q 1 to the point Q 2, kept in contact with the fingertip, for example, a manner of single stroke, it is possible to enter the character "three" .

表示制御部34は、操作荷重Sが第1閾値Sth1を超えたところを入力表示し、第2閾値Sth2以下になったところで、ポインタ表示にする。操作者が、例えば、「三」の文字の3つの横棒の部分を大きな荷重でタッチしたままタッチパッド22上をなぞり、各画の終点から次の画の始点までを小さな荷重でタッチしたままタッチパッド22上をなぞると、表示制御部34は、表示部10の文字入力表示部11に、図5(a)で示すような、「三」の文字を入力表示することができる。 The display control unit 34 inputs and displays a portion where the operation load S L exceeds the first threshold value S th1 , and makes the pointer display when it becomes equal to or less than the second threshold value S th2 . For example, while touching the portion of three horizontal bars of the letter "3" with a large load, the operator traces on the touch pad 22 and keeps touching from the end point of each drawing to the start point of the next drawing with a small load If the user follows the touch pad 22, the display control unit 34 can input and display the character “three” as shown in FIG. 5A on the character input display unit 11 of the display unit 10.

また、入力制御部36は、高い判別精度が期待できる手書き文字、例えば、図5(a)で示す「三」の文字を取得する入力制御を行なうことができる。   Further, the input control unit 36 can perform input control for acquiring handwritten characters that can be expected to have high discrimination accuracy, for example, the character “3” shown in FIG. 5A.

(実施の形態の効果)
本発明の実施の形態によれば、以下のような効果を有する。
(1)本発明の実施の形態に係る表示装置1は、表示部10と、タッチ位置を検出して遠隔操作により表示部10に対応する位置取得を行なうタッチパッド22と、位置取得時のタッチパッド22の操作荷重を取得する荷重センサ24とを備えた入力部20と、操作荷重に基づいて、表示部10への表示態様を変更して表示制御する表示制御部34を備えた制御部30と、を有して構成されている。これにより、操作荷重によって、指からの押し込み力を検知して、押し込み力の強弱とタイミングによって、文字入力とポインタ表示を切り分けることが可能になる。
(2)文字入力とポインタ表示を切り分けることができるので、例えば、手書き入力時において、手書き文字の各画の始点、終点を狙い通りに位置させることが容易となり、遠隔操作の手書き入力において、正確な入力操作が可能になる。これにより、手書き文字の入力精度が向上し、手書き文字入力時の文字判別、文字識別の精度が向上する。
(3)第1閾値Sth1と第2閾値Sth2により、ヒステリシスを持たせることにより、いわゆる一筆書きのような複数画の文字入力にも対応することが可能になる。これにより、タッチパッドに触れたまま、複数画の文字入力が可能になる。
(Effect of the embodiment)
According to the embodiment of the present invention, the following effects are obtained.
(1) The display device 1 according to the embodiment of the present invention includes the display unit 10, the touch pad 22 for detecting the touch position and performing position acquisition corresponding to the display unit 10 by remote control, and touch at the time of position acquisition. An input unit 20 including a load sensor 24 for acquiring an operation load of the pad 22, and a control unit 30 including a display control unit 34 for changing the display mode on the display unit 10 based on the operation load and performing display control And are configured. As a result, the pressing force from the finger is detected by the operation load, and it becomes possible to separate the character input and the pointer display by the strength and timing of the pressing force.
(2) Since the character input and the pointer display can be separated, for example, it becomes easy to position the start point and the end point of each image of the handwritten character according to the aim at the handwriting input. Input operation is possible. As a result, the input accuracy of handwritten characters is improved, and the accuracy of character discrimination and character identification at the time of handwritten character input is improved.
(3) By providing hysteresis by the first threshold value S th1 and the second threshold value S th2 , it becomes possible to cope with character input of a plurality of strokes such as so-called single stroke writing. This enables character input of a plurality of pictures while touching the touch pad.

以上、本発明のいくつかの実施の形態を説明したが、これらの実施の形態は、一例に過ぎず、特許請求の範囲に係る発明を限定するものではない。また、これら新規な実施の形態は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更等を行うことができる。また、これら実施の形態の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態は、発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   Although some embodiments of the present invention have been described above, these embodiments are merely examples and do not limit the invention according to the claims. Moreover, these novel embodiments can be implemented in other various forms, and various omissions, replacements, changes, and the like can be made without departing from the scope of the present invention. Further, not all combinations of the features described in the embodiments are essential to the means for solving the problems of the invention. Furthermore, these embodiments are included in the scope and subject matter of the invention, and are included in the invention described in the claims and the equivalent scope thereof.

1…表示装置、10…表示部、11…文字入力表示部、20…入力部、22…タッチパッド、24…荷重センサ、30…制御部、32…記憶部、34…表示制御部、36…入力制御部、38…文字判別部、50…ベース、100…ポインタ、S…表示信号、S…操作荷重信号、S…タッチ位置信号、Sth1…第1閾値、Sth2……第2閾値、X、Y…ワールド座標、X´、Y´ローカル座標…、x、y…タッチパッド22の座標
DESCRIPTION OF SYMBOLS 1 ... Display apparatus, 10 ... Display part, 11 ... Character input display part, 20 ... Input part, 22 ... Touch pad, 24 ... Load sensor, 30 ... Control part, 32 ... Storage part, 34 ... Display control part, 36 ... input control unit, 38 ... character determination unit, 50 ... base, 100 ... pointer, S D ... display signal, S L ... operation load signal, S P ... touch position signal, S th1 ... first threshold value, S th2 ...... first 2 threshold, X, Y: world coordinates, X ', Y' local coordinates ..., x, y: coordinates of touch pad 22

Claims (6)

表示部と、
タッチ位置を検出して遠隔操作により前記表示部に対応する位置取得を行なうタッチパッドと、前記位置取得時の前記タッチパッドの操作荷重を取得する荷重検出部とを備えた入力部と、
前記操作荷重に基づいて、前記表示部への表示態様を変更して表示制御する表示制御部を備えた制御部と、
を有する表示装置。
A display unit,
A touch pad for detecting a touch position and performing position acquisition corresponding to the display unit by remote control; and an input unit including a load detection unit for acquiring an operation load of the touch pad at the time of position acquisition;
A control unit including a display control unit that changes the display mode on the display unit and performs display control based on the operation load.
A display device having
前記表示制御部は、前記操作荷重が第1閾値以下の場合には前記タッチ位置を前記表示部にポインタ表示し、前記操作荷重が前記第1閾値を超える場合には前記ポインタ表示を消去して前記タッチ位置を前記表示部に入力表示する、請求項1に記載の表示装置。   The display control unit displays the touch position on the display unit as a pointer when the operation load is equal to or less than a first threshold, and erases the pointer display when the operation load exceeds the first threshold. The display device according to claim 1, wherein the touch position is input and displayed on the display unit. 前記表示制御部は、前記表示部に入力表示を行なう場合に、操作荷重がゼロ(タッチオフ)になった場合に、前記入力表示を終了する、請求項1又は2に記載の表示装置。   The display device according to claim 1, wherein the display control unit ends the input display when the operation load is zero (touch off) when the input display is performed on the display unit. 前記表示制御部は、前記表示部に入力表示を行なう場合に、操作荷重が前記第1閾値より小さい第2閾値以下になった場合に、前記入力表示を終了する、請求項1又は2に記載の表示装置。   The display control unit according to claim 1 or 2, wherein the input control is ended when the operation load is equal to or less than a second threshold smaller than the first threshold when the input display is performed on the display unit. Display device. 前記制御部は、前記表示態様に応じて、前記タッチ位置の入力制御を行なう入力制御部を有する、請求項1から4のいずれか1項に記載の入力装置。   The input device according to any one of claims 1 to 4, wherein the control unit includes an input control unit that performs input control of the touch position according to the display mode. 前記制御部は、前記入力制御部により入力された文字の手書き文字判別を行なう文字判別部を有する、請求項5に記載の入力装置。   The input device according to claim 5, wherein the control unit includes a character determination unit configured to determine handwritten characters of characters input by the input control unit.
JP2017240383A 2017-12-15 2017-12-15 Display apparatus and input apparatus Pending JP2019109571A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017240383A JP2019109571A (en) 2017-12-15 2017-12-15 Display apparatus and input apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017240383A JP2019109571A (en) 2017-12-15 2017-12-15 Display apparatus and input apparatus

Publications (1)

Publication Number Publication Date
JP2019109571A true JP2019109571A (en) 2019-07-04

Family

ID=67179740

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017240383A Pending JP2019109571A (en) 2017-12-15 2017-12-15 Display apparatus and input apparatus

Country Status (1)

Country Link
JP (1) JP2019109571A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023042330A (en) * 2021-09-14 2023-03-27 カシオ計算機株式会社 Electronic apparatus, input method, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015521317A (en) * 2012-05-09 2015-07-27 アップル インコーポレイテッド Device, method and graphical user interface for selecting user interface objects
US20160147354A1 (en) * 2013-06-13 2016-05-26 Audi Ag Method for operating a touch-sensitive operating system and touch-sensitive operating system
JP2017513165A (en) * 2014-03-21 2017-05-25 イマージョン コーポレーションImmersion Corporation System and method for force-based object manipulation and tactile sensation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015521317A (en) * 2012-05-09 2015-07-27 アップル インコーポレイテッド Device, method and graphical user interface for selecting user interface objects
US20160147354A1 (en) * 2013-06-13 2016-05-26 Audi Ag Method for operating a touch-sensitive operating system and touch-sensitive operating system
JP2017513165A (en) * 2014-03-21 2017-05-25 イマージョン コーポレーションImmersion Corporation System and method for force-based object manipulation and tactile sensation

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023042330A (en) * 2021-09-14 2023-03-27 カシオ計算機株式会社 Electronic apparatus, input method, and program
JP7424355B2 (en) 2021-09-14 2024-01-30 カシオ計算機株式会社 Electronic devices, input methods and programs

Similar Documents

Publication Publication Date Title
US8959013B2 (en) Virtual keyboard for a non-tactile three dimensional user interface
JP5604279B2 (en) Gesture recognition apparatus, method, program, and computer-readable medium storing the program
US20090249258A1 (en) Simple Motion Based Input System
KR101803222B1 (en) User interface and method for signalling a 3d position of input means during gesture detection
US10613723B2 (en) Information processing apparatus, information processing method, and computer program product
KR101898202B1 (en) Apparatus and method for guiding writing input for recognation of writing
JP6180888B2 (en) Electronic device, method and program
TWI497402B (en) Apparatus and method for processing handwriting input
US20150346996A1 (en) Electronic apparatus and method
CN104346071A (en) Display control device, display control method, and computer program product
CN105045471A (en) Touch operation input device, touch operation input method and recording medium
JP5893491B2 (en) Operation input device
WO2012169189A1 (en) Touch panel input device
JP3400111B2 (en) Input device for portable electronic device, input method for portable electronic device, and portable electronic device
US11644912B2 (en) Interface device and on-panel pad
JP6081606B2 (en) Electronic apparatus and method
JP2019109571A (en) Display apparatus and input apparatus
US20140285425A1 (en) Shaping device
US20100245266A1 (en) Handwriting processing apparatus, computer program product, and method
JP6615491B2 (en) Pen input system, touch pen, and pen input method
JP6821998B2 (en) Electronic blackboard, program, method
CN112083818B (en) Touch input system, touch input device, and touch input assisting tool
EP4073624B1 (en) Systems and methods for grid-aligned inking
JP6309346B2 (en) Input display device and input display method
CN115187986A (en) Text recognition method and device, electronic equipment and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200529

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210309

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210914