JP5471126B2

JP5471126B2 - Electronic device and program

Info

Publication number: JP5471126B2
Application number: JP2009178685A
Authority: JP
Inventors: 博明吉澤
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2009-07-31
Filing date: 2009-07-31
Publication date: 2014-04-16
Anticipated expiration: 2029-07-31
Also published as: JP2011034263A

Description

本発明は、電子機器及びプログラムに関する。 The present invention relates to an electronic device and a program.

従来より、入力される各種数式の演算を実行して演算結果を表示する電子機器として、関数電卓が知られている。 2. Description of the Related Art Conventionally, scientific calculators are known as electronic devices that execute calculations of various input mathematical expressions and display the calculation results.

このような関数電卓では、近年、取り扱える関数の種類が多くなってきており、積分等の複雑な演算を行うことが可能となっている。但し、入力キー群を操作して積分等の数式を入力するには、上下限値や被演算関数を決められた順序でキー入力しなければならないため、入力作業に手間がかかってしまう。そこで、タッチパネルによって数式の手書き入力を行わせ、入力された数式を認識する技術が開発されている（例えば、特許文献１参照）。 In such scientific calculators, in recent years, the types of functions that can be handled are increasing, and it is possible to perform complex operations such as integration. However, in order to input mathematical expressions such as integrals by operating the input key group, it is necessary to input the upper and lower limit values and the operand function in a predetermined order. Thus, a technique has been developed in which a mathematical expression is input by handwriting using a touch panel and the inputted mathematical expression is recognized (see, for example, Patent Document 1).

特開２００７−７２７１８号公報JP 2007-72718 A

しかしながら、手書き入力時の筆跡や入力スピードはユーザの個人個人で異なっているため、数式を手書き入力させて認識する場合には、例えば、認識した文字自体は合っていても、数式内での認識位置がズレてしまうことが十分考えられる。 However, the handwriting input speed and input speed are different for each individual user, so when recognizing a mathematical expression by handwriting, for example, even if the recognized character is correct, it is recognized in the mathematical expression. It is conceivable that the position will shift.

このような場合、文字の位置を修正するためには、ユーザに数式を再入力させることも考えられるが、手間がかかってしまうし、再入力時にも文字の誤認識や認識位置のズレが発生する可能性があるため、使い勝手が悪い。
そのため、近年、手書き入力された数式中での文字位置を容易に修正できる技術について、要望が強まっている。 In such a case, in order to correct the position of the character, it may be possible for the user to re-enter the mathematical formula, but it takes time, and misrecognition of the character or misalignment of the recognition position occurs even when re-input. It is not easy to use.
Therefore, in recent years, there has been a growing demand for a technique that can easily correct the character position in a mathematical expression input by handwriting.

本発明の課題は、手書き入力された数式中での文字位置を容易に修正できるようにすることである。 An object of the present invention is to make it possible to easily correct a character position in a mathematical expression input by handwriting.

以上の課題を解決するため、請求項１に記載の発明は、電子機器において、
タッチパネルを有する表示手段と、
前記タッチパネルに手書き入力された数式を認識し、当該認識された数式を前記表示手段に表示させる手書き数式認識手段と、
前記表示手段に表示された数式中の各文字部分の何れかについて、文字位置の変更指示をユーザから受ける位置変更指示手段と、
前記表示手段に表示された数式中の各文字部分のうち、前記位置変更指示手段によって指定された指定文字部分と、この指定文字部分よりも前に位置する前方文字部分とを検出するとともに、前記前方文字部分に対する前記指定文字部分の位置関係が互いに異なる複数の変更先候補を前記表示手段に表示させて、何れかの変更先候補をユーザに選択させる候補表示制御手段と、
ユーザに選択された変更先候補に従って前記前方文字部分に対する前記指定文字部分の位置を変更し、前記表示手段の表示内容を更新する更新手段と、
を備えることを特徴とする。 In order to solve the above problems, the invention according to claim 1 is an electronic device.
Display means having a touch panel;
Recognizing a mathematical expression input by handwriting on the touch panel, and displaying the recognized mathematical expression on the display means;
Position change instruction means for receiving a character position change instruction from the user for any of the character parts in the mathematical expression displayed on the display means;
Among the character parts in the mathematical expression displayed on the display means, a designated character part designated by the position change instruction means and a forward character part located before the designated character part are detected, and Candidate display control means for causing the display means to display a plurality of change destination candidates whose positional relationship of the designated character portion with respect to the front character portion is different from each other, and for allowing the user to select any change destination candidate;
Updating means for changing the position of the designated character portion relative to the forward character portion according to the change destination candidate selected by the user, and updating the display content of the display means;
It is characterized by providing.

また、請求項２記載の発明は、請求項１記載の電子機器において、
前記手書き数式認識手段は、
認識された数式を自然表示形式で前記表示手段に表示させるための表示用データ形式と、認識された数式を演算するための演算用データ形式とのそれぞれの数式データを生成するデータ生成手段を有し、
前記候補表示制御手段は、
前記表示用データ形式の数式データに基づいて、前記複数の変更先候補を生成することを特徴とする。 The invention according to claim 2 is the electronic device according to claim 1,
The handwritten mathematical expression recognition means includes:
Data generation means for generating respective formula data in a display data format for displaying the recognized formula on the display means in a natural display format and a calculation data format for calculating the recognized formula is provided. And
The candidate display control means includes
The plurality of change destination candidates are generated based on mathematical expression data in the display data format.

また、請求項３記載の発明は、請求項２記載の電子機器において、
前記候補表示制御手段は、少なくとも、
前記前方文字部分と前記指定文字部分とを同じ大きさでこの順に並べた変更先候補と、
前記指定文字部分を前記前方文字部分の指数とした変更先候補とを生成することを特徴とする。 The invention described in claim 3 is the electronic device according to claim 2,
The candidate display control means is at least
A change destination candidate in which the front character portion and the designated character portion are arranged in this order with the same size;
A change destination candidate having the designated character portion as an index of the forward character portion is generated.

また、請求項４記載の発明は、プログラムにおいて、
タッチパネルを有する表示手段を備えた電子機器のコンピュータを、
前記タッチパネルに手書き入力された数式を認識し、当該認識された数式を前記表示手段に表示させる手書き数式認識手段と、
前記表示手段に表示された数式中の各文字部分の何れかについて、文字位置の変更指示をユーザから受ける位置変更指示手段と、
前記表示手段に表示された数式中の各文字部分のうち、前記位置変更指示手段によって指定された指定文字部分と、この指定文字部分よりも前に位置する前方文字部分とを検出するとともに、前記前方文字部分に対する前記指定文字部分の位置関係が互いに異なる複数の変更先候補を前記表示手段に表示させて、何れかの変更先候補をユーザに選択させる候補表示制御手段と、
ユーザに選択された変更先候補に従って前記前方文字部分に対する前記指定文字部分の位置を変更し、前記表示手段の表示内容を更新する更新手段と、
として機能させることを特徴とする。 According to a fourth aspect of the present invention, in the program,
A computer of an electronic device provided with display means having a touch panel,
Recognizing a mathematical expression input by handwriting on the touch panel, and displaying the recognized mathematical expression on the display means;
Position change instruction means for receiving a character position change instruction from the user for any of the character parts in the mathematical expression displayed on the display means;
Among the character parts in the mathematical expression displayed on the display means, a designated character part designated by the position change instruction means and a forward character part located before the designated character part are detected, and Candidate display control means for causing the display means to display a plurality of change destination candidates whose positional relationship of the designated character portion with respect to the front character portion is different from each other, and for selecting any of the change destination candidates,
Updating means for changing the position of the designated character portion relative to the forward character portion according to the change destination candidate selected by the user, and updating the display content of the display means;
It is made to function as.

請求項１，４記載の発明によれば、表示された数式中の各文字部分の何れかについて、文字位置の変更指示をユーザが行うと、表示された数式中の各文字部分のうち、指定された指定文字部分と、この指定文字部分よりも前に位置する前方文字部分とが検出され、前方文字部分に対する指定文字部分の位置関係が互いに異なる複数の変更先候補が表示され、何れかの変更先候補をユーザが選択すると、選択された変更先候補に従って前方文字部分に対する指定文字部分の位置が変更され、表示内容が更新されるので、認識した文字自体が合っていて数式内での認識位置がズレている場合であっても、文字位置の変更指示を行って変更先候補を選択するだけで、数式中での文字位置を修正することができる。従って、数式を再入力する場合と比較して、手書き入力された数式中での文字位置を容易に修正することができる。 According to the first and fourth aspects of the invention, when the user gives an instruction to change the character position for any of the character parts in the displayed mathematical expression, the designation is made among the character parts in the displayed mathematical expression. The designated character part and the front character part located before the designated character part are detected, and a plurality of change destination candidates having different positional relationships of the designated character part with respect to the front character part are displayed. When the user selects a change destination candidate, the position of the designated character portion relative to the forward character portion is changed according to the selected change destination candidate, and the display content is updated, so that the recognized character matches and is recognized in the formula. Even if the position is misaligned, the character position in the mathematical formula can be corrected by simply instructing the character position change and selecting the change destination candidate. Therefore, the character position in the mathematical expression input by handwriting can be easily corrected as compared with the case of re-inputting the mathematical expression.

関数電卓の概略構成を示す平面図である。It is a top view which shows schematic structure of a scientific calculator. 関数電卓の機能構成を示すブロック図である。It is a block diagram which shows the function structure of a scientific calculator. 数式表示データのデータ構造を示す図である。It is a figure which shows the data structure of numerical formula display data. 数式テキストデータのデータ構造を示す図である。It is a figure which shows the data structure of numerical formula text data. 数式テキストデータのデータ構造を示す図である。It is a figure which shows the data structure of numerical formula text data. 手書き入力処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a handwriting input process. 認識・表示処理の流れを示すフローチャートである。It is a flowchart which shows the flow of recognition and a display process. 手書き入力処理を説明するための図である。It is a figure for demonstrating handwriting input processing. 手書き入力処理を説明するための図である。It is a figure for demonstrating handwriting input processing. 関数部品バッファの構造を示す図である。It is a figure which shows the structure of a function component buffer. 関数部品バッファの構造を示す図である。It is a figure which shows the structure of a function component buffer. 自動訂正処理の流れを示すフローチャートである。It is a flowchart which shows the flow of an automatic correction process. 手書き入力処理を説明するための図である。It is a figure for demonstrating handwriting input processing.

以下、添付図面を参照して本発明に係る実施の形態の一例を詳細に説明する。ただし、発明の範囲は、図示例に限定されない。 Hereinafter, an example of an embodiment according to the present invention will be described in detail with reference to the accompanying drawings. However, the scope of the invention is not limited to the illustrated examples.

（第１の実施形態）
先ず、図１〜図９を参照して、本発明に係る第１の実施形態を説明する。
［１．１外観構成］
図１は、本発明に係る電子機器を適用した関数電卓１の概略構成を示す平面図である。
この図に示すように、関数電卓１は、各種キー群を有する入力キー群２と、ディスプレイ３と、を備えている。 (First embodiment)
First, a first embodiment according to the present invention will be described with reference to FIGS.
[1.1 External configuration]
FIG. 1 is a plan view showing a schematic configuration of a scientific calculator 1 to which an electronic apparatus according to the present invention is applied.
As shown in the figure, the scientific calculator 1 includes an input key group 2 having various key groups and a display 3.

入力キー群２は、ユーザから数値や演算記号等（以下、これらを包括して「文字」とも称する）の数式構成要素の入力操作を受けたり、各種処理の指示操作を受けたりするためのキー群であり、それぞれ固有の機能を割り当てられた複数のキーを備えている。本実施の形態においては、入力キー群２は、数式の演算を指示するためのＥＸＥキー２０や、数式内容の訂正を指示するための訂正キー２１などを有している。 The input key group 2 is a key for receiving an input operation of a mathematical expression component such as a numerical value, an operation symbol, etc. (hereinafter collectively referred to as “character”) or an instruction operation of various processes from the user. A group is provided with a plurality of keys each assigned a unique function. In the present embodiment, the input key group 2 has an EXE key 20 for instructing calculation of a mathematical expression, a correction key 21 for instructing correction of the contents of the mathematical expression, and the like.

ディスプレイ３は、ＬＣＤ（Liquid Crystal Display）やＥＬＤ（Electronic Luminescent Display）等により構成されており、入力キー群２などの操作に応じた文字や符号、数式、演算結果などの他、関数電卓１を使用するために必要な各種データを表示するようになっている。このディスプレイ３には、本発明における位置変更指示手段としてのタッチパネル３０（図２参照）が表示画面全面に亘って一体的に設けられている。 The display 3 is composed of an LCD (Liquid Crystal Display), an ELD (Electronic Luminescent Display), etc. In addition to characters, symbols, mathematical formulas, calculation results, etc. according to the operation of the input key group 2, the scientific calculator 1 Various data necessary for use is displayed. The display 3 is integrally provided with a touch panel 30 (see FIG. 2) as position change instruction means in the present invention over the entire display screen.

タッチパネル３０は、ディスプレイ３の表示画面に対する入力ペン（図示省略）の接触位置を検出するようになっている。具体的には、タッチパネル３０は、例えば、表示画面の全域、或いは表示画面よりも内側に設けられ、電磁誘導方式、磁気歪式、感圧式等の方式により、表示画面上における接触位置のＸＹ座標を検出する。 The touch panel 30 detects a contact position of an input pen (not shown) with respect to the display screen of the display 3. Specifically, the touch panel 30 is provided, for example, on the entire display screen or on the inner side of the display screen, and the XY coordinates of the contact position on the display screen by an electromagnetic induction method, a magnetostriction method, a pressure sensitive method, or the like. Is detected.

［１．２機能構成］
続いて、関数電卓１の機能構成を説明する。
図２は、関数電卓１の概略的な機能構成を示すブロック図である。 [1.2 Functional configuration]
Next, the functional configuration of the scientific calculator 1 will be described.
FIG. 2 is a block diagram illustrating a schematic functional configuration of the scientific calculator 1.

この図に示すように、関数電卓１は、キー入力部１４と、本発明における表示手段としての表示部１５と、ＲＡＭ（Random Access Memory）１２と、記憶部１３と、本発明における手書き数式認識手段、候補表示制御手段、更新手段及びデータ生成手段としてのＣＰＵ（Central Processing Unit）１１と、を備えて構成されている。 As shown in this figure, the scientific calculator 1 includes a key input unit 14, a display unit 15 as display means in the present invention, a RAM (Random Access Memory) 12, a storage unit 13, and handwritten mathematical expression recognition in the present invention. A CPU (Central Processing Unit) 11 as means, candidate display control means, update means, and data generation means.

キー入力部１４は、上述の入力キー群２を備えており、押下されたキーに対応する操作信号をＣＰＵ１１に出力するようになっている。 The key input unit 14 includes the input key group 2 described above, and outputs an operation signal corresponding to the pressed key to the CPU 11.

表示部１５は、上述のディスプレイ３を備えており、ＣＰＵ１１からの表示信号に従って各種情報をディスプレイ３に表示するようになっている。また、この表示部１５は、ディスプレイ３と一体的に設けられたタッチパネル３０を備えており、表示画面に対する入力ペンの接触位置情報をＣＰＵ１１に出力するようになっている。 The display unit 15 includes the display 3 described above, and displays various types of information on the display 3 in accordance with display signals from the CPU 11. Further, the display unit 15 includes a touch panel 30 provided integrally with the display 3, and outputs contact position information of the input pen with respect to the display screen to the CPU 11.

ＲＡＭ１２は、情報を一時的に格納する揮発性のメモリであり、実行される各種プログラムやこれら各種プログラムに係るデータ等を格納する複数のワークエリアを有する。具体的には、本実施の形態におけるＲＡＭ１２には、表示ビットマップデータ１２０と、入力座標データ１２１と、入力イメージデータ１２２と、数式表示データ１２３と、数式テキストデータ１２４とが格納されるようになっている。 The RAM 12 is a volatile memory that temporarily stores information, and has a plurality of work areas that store various programs to be executed and data related to these various programs. Specifically, the display bitmap data 120, the input coordinate data 121, the input image data 122, the formula display data 123, and the formula text data 124 are stored in the RAM 12 in the present embodiment. It has become.

このうち、表示ビットマップデータ１２０は、ディスプレイ３に表示される画像のビットマップデータである。
入力座標データ１２１は、タッチパネル３０に対してペンタッチ入力（手書き入力）された座標位置（ペンタッチ入力された時点での座標位置）を示すデータである。
入力イメージデータ１２２は、タッチパネル３０に対してペンタッチ入力されたデータの座標列を示すデータである。 Among these, the display bitmap data 120 is bitmap data of an image displayed on the display 3.
The input coordinate data 121 is data indicating a coordinate position (coordinate position at the time of pen touch input) that has been pen touch input (handwritten input) to the touch panel 30.
The input image data 122 is data indicating a coordinate sequence of data input by pen touch on the touch panel 30.

数式表示データ１２３は、認識された数式を自然表示形式でディスプレイ３に表示させるためのデータであり、表示用のデータ形式で表されている。より具体的には、図３に一例を示すように、数式表示データ１２３は、表示の位置及び大きさを示すコードＣと、コードＣによる表示対象の文字との組で構成されている。なお、図３では、後述の図８（ｃ）に図示される積分関数の数式についての数式表示データ１２３を示しており、各コードＣの内容を簡略化して図示している。この図に示すように、コードＣ１〜Ｃ７は、積分記号「∫」，積分変数の上限値「２」，下限値「１」，被積分関数の文字「ｘ」，「２」，被積分関数の終了記号「ｄ」，積分変数「ｘ」について、表示の位置及び大きさをそれぞれ示している。 The mathematical expression display data 123 is data for displaying the recognized mathematical expression on the display 3 in a natural display format, and is expressed in a display data format. More specifically, as shown in an example in FIG. 3, the mathematical expression display data 123 is configured by a set of a code C indicating a display position and size and a character to be displayed by the code C. FIG. 3 shows formula display data 123 for the formula of the integral function shown in FIG. 8C described later, and the contents of each code C are shown in a simplified manner. As shown in this figure, codes C1 to C7 include an integral symbol “∫”, an integral variable upper limit value “2”, a lower limit value “1”, an integrand character “x”, “2”, and an integrand. For the end symbol “d” and the integral variable “x”, the position and size of the display are shown.

数式テキストデータ１２４は、認識された数式を演算するためのデータであり、演算用のデータ形式で表されている。より具体的には、図４，図５に一例を示すように、数式テキストデータ１２４は、いわゆる一行表示形式で記述されている。 The mathematical formula text data 124 is data for computing the recognized mathematical formula, and is expressed in a data format for computation. More specifically, as shown in FIG. 4 and FIG. 5, the formula text data 124 is described in a so-called one-line display format.

記憶部１３は、ＲＯＭ（Read Only Memory）等により構成される不揮発性のメモリであり、各種プログラム及び各種データを記憶している。具体的には、記憶部１３は、本発明に係るプログラムとしての手書き入力プログラム１３０を記憶している。
この手書き入力プログラム１３０は、後述の手書き入力処理（図６〜図７参照）をＣＰＵ１１に実行させるためのプログラムである。 The storage unit 13 is a non-volatile memory composed of a ROM (Read Only Memory) or the like, and stores various programs and various data. Specifically, the storage unit 13 stores a handwriting input program 130 as a program according to the present invention.
The handwriting input program 130 is a program for causing the CPU 11 to execute handwriting input processing (see FIGS. 6 to 7) described later.

ＣＰＵ１１は、関数電卓１の各部を中央制御する。具体的には、ＣＰＵ１１は、記憶部１３に記憶されているシステムプログラム及び各種アプリケーションプログラムの中から指定されたプログラムをＲＡＭ１２に展開し、ＲＡＭ１２に展開されたプログラムとの協働で、各種処理を実行する。 The CPU 11 centrally controls each part of the scientific calculator 1. Specifically, the CPU 11 expands a program specified from the system program and various application programs stored in the storage unit 13 in the RAM 12 and performs various processes in cooperation with the program expanded in the RAM 12. Run.

［１．３関数電卓の動作］
続いて、関数電卓１の動作を説明する。
図６〜図７は、手書き入力処理の動作を説明するためのフローチャートである。なお、この手書き入力処理は、ユーザによりタッチパネル３０やキー入力部１４を介して手書き入力処理の実行指示が入力されると、記憶部１３から手書き入力プログラムが読み出されてＲＡＭ１２に適宜展開される結果、当該手書き入力プログラム１３０とＣＰＵ１１との協働によって実行される。なお、処理の開始時には、数式はペンタッチ入力されておらず、ディスプレイ３には何も表示されていないものとする。 [1.3 Operation of scientific calculator]
Next, the operation of the scientific calculator 1 will be described.
6 to 7 are flowcharts for explaining the operation of the handwriting input process. In the handwriting input process, when a user inputs an instruction to execute the handwriting input process via the touch panel 30 or the key input unit 14, a handwriting input program is read from the storage unit 13 and appropriately expanded in the RAM 12. As a result, the handwriting input program 130 and the CPU 11 are executed in cooperation. At the start of the process, it is assumed that the mathematical formula is not input by pen touch and nothing is displayed on the display 3.

この手書き入力処理においては、まず、図６に示すように、ＣＰＵ１１は訂正キー２１が操作されるか否かを判定し（ステップＳ１）、操作されないと判定した場合（ステップＳ１；Ｎｏ）には、タッチパネル３０に対するペンタッチ操作がされるか否かを判定する（ステップＳ２）。具体的には、ペンタッチ入力されたことを示す信号をタッチパネル３０からＣＰＵ１１が受信したか否かに基づいて、ステップＳ２の判別が行われる。 In this handwriting input process, first, as shown in FIG. 6, the CPU 11 determines whether or not the correction key 21 is operated (step S1), and when it is determined that the correction key 21 is not operated (step S1; No). Then, it is determined whether or not a pen touch operation is performed on the touch panel 30 (step S2). Specifically, the determination in step S <b> 2 is performed based on whether the CPU 11 has received a signal indicating that a pen touch input has been performed from the touch panel 30.

このステップＳ２においてペンタッチ操作がされないと判定した場合（ステップＳ２；Ｎｏ）には、ＣＰＵ１１は、上述のステップＳ１に移行し、ペンタッチ操作がされたと判定した場合（ステップＳ２；Ｙｅｓ）には、タッチパネル３０に対する数式の手書き入力を受け付け、入力された内容をディスプレイ３に表示させる（ステップＳ３）。具体的には、ペンタッチ入力された座標位置を示す入力座標データ１２１がタッチパネル３０からＣＰＵ１１に送信されると、ＣＰＵ１１は、この入力座標データ１２１をＲＡＭ１２に記憶させる。また、ＣＰＵ１１は、入力座標データ１２１に応じた入力イメージデータ１２２を生成してＲＡＭ１２に記憶させるとともに、ペンタッチの軌跡として表示部１５に表示させる。 If it is determined in step S2 that the pen touch operation is not performed (step S2; No), the CPU 11 proceeds to step S1 described above, and if it is determined that the pen touch operation is performed (step S2; Yes), the touch panel. A mathematical expression handwritten input for 30 is received, and the input content is displayed on the display 3 (step S3). Specifically, when input coordinate data 121 indicating a coordinate position input by pen touch is transmitted from the touch panel 30 to the CPU 11, the CPU 11 stores the input coordinate data 121 in the RAM 12. In addition, the CPU 11 generates input image data 122 corresponding to the input coordinate data 121 and stores the input image data 122 in the RAM 12, and displays the input image data 122 on the display unit 15 as a pen touch locus.

次に、ＣＰＵ１１は、タッチパネル３０からペンが離れるか否かを判定し（ステップＳ４）、離れていないと判定した場合（ステップＳ４；Ｎｏ）には、上述のステップＳ３に移行する。具体的には、このステップＳ４では、ＣＰＵ１１は、ペン離れから所定の時間が経過しているか否かを判定する。つまり、複数のストロークで構成される文字の入力や、複数の文字の入力において、入力途中のペン離れにより認識処理が開始されることを防止する必要があるために、所定の時間が経過しているか否かの判別が行われる。なお、所定の時間は、予めユーザにより設定された時間であり、記憶部１３等に記憶されているものとする。 Next, the CPU 11 determines whether or not the pen is separated from the touch panel 30 (step S4). When it is determined that the pen is not separated (step S4; No), the CPU 11 proceeds to the above step S3. Specifically, in this step S4, the CPU 11 determines whether or not a predetermined time has passed since the pen separation. In other words, it is necessary to prevent the recognition process from being started due to the separation of the pen in the middle of the input of characters composed of a plurality of strokes or the input of a plurality of characters. It is determined whether or not there is. The predetermined time is a time set in advance by the user and is stored in the storage unit 13 or the like.

一方、ステップＳ４において所定の時間だけタッチパネル３０からペンが離れたと判定した場合（ステップＳ４；Ｙｅｓ）には、ＣＰＵ１１は、入力イメージデータ１２２に基づいて数式を認識できるか否かを判定する（ステップＳ５）。 On the other hand, when it is determined in step S4 that the pen has been removed from the touch panel 30 for a predetermined time (step S4; Yes), the CPU 11 determines whether the mathematical expression can be recognized based on the input image data 122 (step S4). S5).

このステップＳ５において、認識できないと判定した場合（ステップＳ５；Ｎｏ）には、ＣＰＵ１１は、後述のステップＳ７を経由してステップＳ１に戻り、次のペン入力を待機する。 If it is determined in step S5 that it cannot be recognized (step S5; No), the CPU 11 returns to step S1 via step S7 described later and waits for the next pen input.

一方、ステップＳ５において、認識できると判定した場合（ステップＳ５；Ｙｅｓ）には、ＣＰＵ１１は、認識・表示処理を行う（ステップＳ６）。 On the other hand, if it is determined in step S5 that recognition is possible (step S5; Yes), the CPU 11 performs recognition / display processing (step S6).

具体的には、図７に示すように、まずＣＰＵ１１は、入力イメージデータ１２２に基づいて入力形状を認識するとともに（ステップＴ１）、その大きさ及び位置を認識する（ステップＴ２）。 Specifically, as shown in FIG. 7, first, the CPU 11 recognizes the input shape based on the input image data 122 (step T1), and recognizes its size and position (step T2).

次に、ＣＰＵ１１は、ステップＴ１〜Ｔ２での認識結果に基づいて、手書き入力された数式を認識するとともに、数式表示データ１２３及び数式テキストデータ１２４を生成し、ＲＡＭ１２に記憶させる（ステップＴ３、Ｔ４）。 Next, the CPU 11 recognizes the mathematical formula input by handwriting based on the recognition results in steps T1 and T2, and generates mathematical formula display data 123 and mathematical formula text data 124, and stores them in the RAM 12 (steps T3 and T4). ).

そして、ＣＰＵ１１は、数式表示データ１２３に基づいて、認識された数式を自然表示形式のテキストとしてディスプレイ３に表示させ（ステップＴ５）、認識・表示処理を終了する。なお、このステップＴ５においては、ＣＰＵ１１は、入力イメージデータ１２２に基づいて、手書き入力された数式のビットマップもディスプレイ３に表示させるようになっている。 Then, the CPU 11 displays the recognized mathematical expression on the display 3 as natural display text based on the mathematical expression display data 123 (step T5), and ends the recognition / display processing. In step T <b> 5, the CPU 11 displays the bitmap of the mathematical formula input by handwriting on the display 3 based on the input image data 122.

以上の認識・表示処理が終了したら、図６に示すように、ＣＰＵ１１は、ユーザによりＥＸＥキー２０が操作されるか否かを判定し（ステップＳ７）、操作されないと判定した場合（ステップＳ７；Ｎｏ）には、上述のステップＳ１に移行する。 When the above recognition / display processing is completed, as shown in FIG. 6, the CPU 11 determines whether or not the EXE key 20 is operated by the user (step S7), and determines that it is not operated (step S7; No) shifts to the above-mentioned step S1.

一方、ステップＳ７においてＥＸＥキー２０が操作されたと判定した場合（ステップＳ７；Ｙｅｓ）には、ＣＰＵ１１は、数式テキストデータ１２４に基づいて、認識された数式の演算を実行し、演算結果をディスプレイ３に表示させ（ステップＳ８）、手書き入力処理を終了する。 On the other hand, if it is determined in step S7 that the EXE key 20 has been operated (step S7; Yes), the CPU 11 executes the calculation of the recognized mathematical expression based on the mathematical expression text data 124, and displays the calculation result on the display 3. (Step S8), and the handwriting input process is terminated.

また、上述のステップＳ１において訂正キー２１が操作されたと判定した場合（ステップＳ１；Ｙｅｓ）には、ＣＰＵ１１は、ディスプレイ３に表示されている数式のテキスト部分がペンタッチされるか否かを判定する（ステップＳ１１）。 If it is determined in step S1 that the correction key 21 has been operated (step S1; Yes), the CPU 11 determines whether the text portion of the mathematical expression displayed on the display 3 is touched with a pen. (Step S11).

このステップＳ１１においてテキスト部分がペンタッチされないと判定した場合（ステップＳ１１；Ｎｏ）には、ＣＰＵ１１は他の処理へ移行する。 If it is determined in step S11 that the text portion is not touched with a pen (step S11; No), the CPU 11 proceeds to another process.

一方、ステップＳ１１においてテキスト部分がペンタッチされたと判定した場合（ステップＳ１１；Ｙｅｓ）には、ＣＰＵ１１は、数式表示データ１２３に基づいて、ペンタッチにより指定された文字部分（以下、指定文字部分とする）と、この指定文字部分よりも前（左側）に位置する前方文字部分とを検出し、前方文字部分に対する指定文字部分の位置関係が互いに異なる複数の変更先候補を生成する（ステップＳ１２）。より詳細には、このステップＳ１２において、ＣＰＵ１１は、前方文字部分と指定文字部分とを同じ大きさでこの順に並べた変更先候補と、指定文字部分を前方文字部分の指数とした変更先候補との少なくとも２つの候補を生成するようになっている。 On the other hand, if it is determined in step S11 that the text part has been touched with a pen (step S11; Yes), the CPU 11 designates a character part designated by pen touch based on the mathematical expression display data 123 (hereinafter referred to as a designated character part). Then, the front character portion positioned before (on the left side of) the designated character portion is detected, and a plurality of change destination candidates having different positional relationships of the designated character portion with respect to the front character portion are generated (step S12). More specifically, in this step S12, the CPU 11 determines a change destination candidate in which the forward character portion and the designated character portion are arranged in this order in the same size, a change destination candidate having the designated character portion as an index of the forward character portion, At least two candidates are generated.

次に、ＣＰＵ１１は、生成した変換先候補をディスプレイ３に一覧表示させ（ステップＳ１３）、何れかの変換先候補がユーザに選択されるか否かを判定する（ステップＳ１４）。 Next, the CPU 11 displays a list of the generated conversion destination candidates on the display 3 (step S13), and determines whether any conversion destination candidate is selected by the user (step S14).

このステップＳ１４において変換先候補が選択されないと判定した場合（ステップＳ１４；Ｎｏ）には、ＣＰＵ１１は、選択が行われるまでステップＳ１４の処理を繰り返す。 If it is determined in step S14 that no conversion destination candidate is selected (step S14; No), the CPU 11 repeats the process of step S14 until selection is performed.

一方、ステップＳ１４において何れかの変換先候補が選択されたと判定した場合（ステップＳ１４；Ｙｅｓ）には、選択された変換先候補に従って前方文字部分に対する指定文字部分の位置を変更し、数式表示データ１２３及び数式テキストデータ１２４の内容と、ディスプレイ３の表示内容とを更新した後（ステップＳ１５）、上述のステップＳ７に移行する。 On the other hand, if it is determined in step S14 that any conversion destination candidate has been selected (step S14; Yes), the position of the designated character portion with respect to the forward character portion is changed according to the selected conversion destination candidate, and the mathematical expression display data 123 and the contents of the formula text data 124 and the display contents of the display 3 are updated (step S15), and then the process proceeds to the above-described step S7.

［１．４動作例］
続いて、上記の手書き入力処理のうち、特にステップＳ１１〜Ｓ１５の処理について、具体的に説明する。 [1.4 Operation example]
Next, among the above handwriting input processes, the processes of steps S11 to S15 will be specifically described.

（動作例１）
まず、図８（ａ）の中央部に示すような数式をユーザが手書き入力すると（ステップＳ３）、図中の左上部に示すような数式が認識され、自然表示形式のテキストとして表示される（ステップＳ６）。なお、ここで認識された数式では、ユーザが積分変数として手書き入力した文字「ｘ」について、数式内での認識位置がズレている。 (Operation example 1)
First, when the user manually inputs a mathematical expression as shown in the center of FIG. 8A (step S3), the mathematical expression as shown in the upper left part of the figure is recognized and displayed as text in a natural display format ( Step S6). In the mathematical formula recognized here, the recognition position in the mathematical formula is shifted with respect to the character “x” input by handwriting as an integration variable by the user.

次に、ユーザが訂正キー２１を操作し（ステップＳ１；Ｙｅｓ）、認識位置のズレている文字「ｘ」の部分をペンタッチにより指定すると（ステップＳ１１；Ｙｅｓ）、図８（ｂ）に示すように、指定文字部分「ｘ」と、その直前の前方文字部分「ｄ」とが検出され、指定文字部分「ｘ」を前方文字部分「ｄ」の指数とした１番目の変換先候補「１：ｄ^x」と、前方文字部部分「ｄ」と指定文字部分「ｘ」とが同じ大きさで並べられた２番目の変換先候補「２：ｄｘ」と、指定文字部分「ｘ」を前方文字部分「ｄ」の下付き文字とした３番目の変換先候補「３：ｄ_x」とが表示される（ステップＳ１３）。 Next, when the user operates the correction key 21 (step S1; Yes) and designates the portion of the character “x” whose recognition position is shifted by the pen touch (step S11; Yes), as shown in FIG. 8B. Then, the designated character part “x” and the immediately preceding character part “d” are detected, and the first conversion destination candidate “1:” with the designated character part “x” as an index of the forward character part “d” is detected. d ^x ”, the second conversion destination candidate“ 2: dx ”in which the front character portion“ d ”and the designated character portion“ x ”are arranged in the same size, and the designated character portion“ x ” The third conversion destination candidate “3: d _x ” as a subscript of the part “d” is displayed (step S13).

そして、ユーザが２番目の変換先候補「２：ｄｘ」を選択すると（ステップＳ１４；Ｙｅｓ）、図８（ｃ）や図４に示すように、この変換先候補に従って前方文字部分「ｄ」に対する指定文字部分「ｘ」の位置が変更され、数式表示データ１２３及び数式テキストデータ１２４の内容と、ディスプレイ３の表示内容とが更新される（ステップＳ１５）。 When the user selects the second conversion destination candidate “2: dx” (step S14; Yes), as shown in FIG. 8C and FIG. 4, the forward character portion “d” is selected according to the conversion destination candidate. The position of the designated character part “x” is changed, and the contents of the mathematical expression display data 123 and mathematical expression text data 124 and the display contents of the display 3 are updated (step S15).

（動作例２）
まず、図９（ａ）の中央部に示すような数式をユーザが手書き入力すると（ステップＳ３）、図中の左上部に示すような数式が認識され、自然表示形式のテキストとして表示される（ステップＳ６）。なお、ここで認識された数式では、ユーザが「ｘ」の指数として手書き入力した文字「２」について、数式内での認識位置がズレている。 (Operation example 2)
First, when the user inputs a mathematical expression as shown in the center of FIG. 9A by handwriting (step S3), the mathematical expression as shown in the upper left part of the figure is recognized and displayed as text in a natural display format ( Step S6). In the mathematical expression recognized here, the recognition position in the mathematical expression is shifted with respect to the character “2” handwritten and input by the user as the index of “x”.

次に、ユーザが訂正キー２１を操作し（ステップＳ１；Ｙｅｓ）、認識位置のズレている文字「２」の部分をペンタッチにより指定すると（ステップＳ１１；Ｙｅｓ）、図９（ｂ）に示すように、指定文字部分「２」と、その直前の前方文字部分「ｘ」とが検出され、指定文字部分「２」を前方文字部分「ｘ」の指数とした１番目の変換先候補「１：ｘ²」と、前方文字部部分「ｘ」と指定文字部分「２」とが同じ大きさで並べられた２番目の変換先候補「２：ｘ２」とが表示される（ステップＳ１３）。 Next, when the user operates the correction key 21 (step S1; Yes) and designates the portion of the character “2” whose recognition position is shifted by the pen touch (step S11; Yes), as shown in FIG. 9B. Then, the designated character part “2” and the immediately preceding character part “x” are detected, and the first conversion destination candidate “1:” with the designated character part “2” as an index of the forward character part “x” is detected. x ² ”and the second conversion destination candidate“ 2: x2 ”in which the front character portion“ x ”and the designated character portion“ 2 ”are arranged in the same size are displayed (step S13).

そして、ユーザが１番目の変換先候補「１：ｘ²」を選択すると（ステップＳ１４；Ｙｅｓ）、図９（ｃ）や図５に示すように、この変換先候補に従って前方文字部分「ｘ」に対する指定文字部分「２」の位置が変更され、数式表示データ１２３及び数式テキストデータ１２４の内容と、ディスプレイ３の表示内容とが更新される（ステップＳ１５）。 When the user selects the first conversion destination candidate “1: x ² ” (step S14; Yes), as shown in FIG. 9C and FIG. 5, the forward character portion “x” is displayed according to the conversion destination candidate. The position of the designated character part “2” with respect to is changed, and the contents of the mathematical expression display data 123 and mathematical expression text data 124 and the display contents of the display 3 are updated (step S15).

以上、本実施の形態によれば、図６のステップＳ１１〜Ｓ１５や、図８，図９等に示したように、表示された数式中の各文字部分の何れかについて、文字位置の変更指示をユーザが行うと、数式中の各文字部分のうち、指定された指定文字部分と、この指定文字部分よりも前に位置する前方文字部分とが検出された後、前方文字部分に対する指定文字部分の位置関係が互いに異なる複数の変更先候補が表示され、何れかの変更先候補をユーザが選択すると、選択された変更先候補に従って前方文字部分に対する指定文字部分の位置が変更され、表示内容が更新されるので、認識した文字自体が合っていて数式内での認識位置がズレている場合であっても、文字位置の変更指示を行って変更先候補を選択するだけで、数式中での文字位置を修正することができる。従って、数式を再入力する場合と比較して、手書き入力された数式中での文字位置を容易に修正することができる。 As described above, according to the present embodiment, as shown in steps S11 to S15 of FIG. 6, FIG. 8, FIG. When the user performs, after the designated character portion designated and the forward character portion positioned before the designated character portion are detected, the designated character portion for the forward character portion is detected. A plurality of change destination candidates having different positional relationships are displayed, and when the user selects one of the change destination candidates, the position of the designated character portion with respect to the front character portion is changed according to the selected change destination candidate, and the display content is Since it is updated, even if the recognized character is correct and the recognition position in the equation is misaligned, just change the character position and select the change destination candidate. Correct character position Rukoto can. Therefore, the character position in the mathematical expression input by handwriting can be easily corrected as compared with the case of re-inputting the mathematical expression.

（第２の実施形態）
続いて、本発明に係る電子機器の第２の実施形態について説明する。なお、上記第１の実施形態との間で互いに対応する部分が同様に構成されている場合には、同一の符号を付して、その説明を省略する。 (Second Embodiment)
Subsequently, a second embodiment of the electronic apparatus according to the invention will be described. In addition, when the part corresponding mutually with the said 1st Embodiment is comprised similarly, the same code | symbol is attached | subjected and the description is abbreviate | omitted.

［２．１構成］
本実施の形態における関数電卓１Ａの記憶部１３Ａは、図２に示すように、手書き入力プログラム１３０Ａを備えている。
この手書き入力プログラム１３０Ａは、後述の手書き入力処理（図６，図１２参照）をＣＰＵ１１に実行させるためのプログラムである。 [2.1 Configuration]
The storage unit 13A of the scientific calculator 1A according to the present embodiment includes a handwriting input program 130A as shown in FIG.
This handwriting input program 130A is a program for causing the CPU 11 to execute handwriting input processing (see FIGS. 6 and 12) described later.

また、関数電卓１ＡのＲＡＭ１２Ａは、図１０，図１１に示すように、関数部品バッファ１２５を有している。なお、図２では、図示の便宜上、関数部品バッファ１２５の図示を省略している。 Further, the RAM 12A of the scientific calculator 1A has a functional component buffer 125 as shown in FIGS. In FIG. 2, the functional component buffer 125 is not shown for convenience of illustration.

この関数部品バッファ１２５には、上述の認識・表示処理において認識される関数の種類に基づいて、当該関数の構成要素の種類ごとにバッファＢが形成され、各構成要素の内容（表示対象）が格納されるようになっている。 In the function component buffer 125, a buffer B is formed for each type of component of the function based on the type of function recognized in the above recognition / display processing, and the contents (display target) of each component are stored. It is to be stored.

例えば、認識される関数が積分関数の場合には、図１０に示すように、関数部品バッファ１２５には、積分記号を格納するバッファＢ１と、被積分関数を格納するバッファＢ２と、積分変数の上限値，下限値を格納するバッファＢ３，Ｂ４と、被積分関数の終了記号を格納するバッファＢ５と、積分変数を格納するバッファＢ６とが形成され、各バッファＢ１〜Ｂ６には、その構成要素についての表示対象が格納される。なお、この図では、各バッファＢに格納される構成要素の種類を図中の左側欄に示し、各構成要素についての表示対象を図中の右側欄に示している。 For example, when the recognized function is an integral function, as shown in FIG. 10, the function component buffer 125 includes a buffer B1 for storing an integral symbol, a buffer B2 for storing an integrand, Buffers B3 and B4 for storing the upper limit value and the lower limit value, a buffer B5 for storing the end symbol of the integrand, and a buffer B6 for storing the integration variable are formed. Each of the buffers B1 to B6 includes its constituent elements. The display target for is stored. In this figure, the type of the component stored in each buffer B is shown in the left column in the figure, and the display target for each component is shown in the right column in the drawing.

また、認識される関数が微分関数の場合には、図１１の左側欄に示すように、関数部品バッファ１２５には、微分記号を格納するバッファＢ１と、微分変数を格納するバッファＢ２と、微分式を格納するバッファＢ３と、微分点を格納するバッファＢ４とが形成され、各バッファＢ１〜Ｂ４には、その構成要素についての表示対象が格納される。 When the recognized function is a differential function, the function component buffer 125 includes a buffer B1 for storing a differential symbol, a buffer B2 for storing a differential variable, and a differential as shown in the left column of FIG. A buffer B3 for storing the equation and a buffer B4 for storing the differential point are formed, and each buffer B1 to B4 stores a display target for the component.

また、認識される関数が総和関数の場合には、図１１の右側欄に示すように、関数部品バッファ１２５には、総和記号を格納するバッファＢ１と、変数を格納するバッファＢ２と、変数の始点，終点を格納するバッファＢ３，Ｂ４と、被総和関数（一般項）を格納するバッファＢ５とが形成され、各バッファＢ１〜Ｂ５には、その構成要素についての表示対象が格納される。 If the recognized function is a summation function, as shown in the right column of FIG. 11, the function component buffer 125 includes a buffer B1 for storing a summation symbol, a buffer B2 for storing a variable, Buffers B3 and B4 for storing the start point and end point and a buffer B5 for storing the function to be summed (general term) are formed. In each of the buffers B1 to B5, display objects for the constituent elements are stored.

［２．２関数電卓の動作］
続いて、関数電卓１Ａの動作について説明する。なお、本第２の実施形態における関数電卓１Ａでは、上記第１の実施形態の手書き入力処理におけるステップＳ１１〜Ｓ１５（図６参照）に代えて、以下の自動訂正処理を行うようになっている。 [2.2 Operation of scientific calculator]
Next, the operation of the scientific calculator 1A will be described. In the scientific calculator 1A according to the second embodiment, the following automatic correction process is performed instead of steps S11 to S15 (see FIG. 6) in the handwriting input process according to the first embodiment. .

図１２は、ＣＰＵ１１が記憶部１３から手書き入力プログラム１３０Ａを読み出して実行する手書き入力処理のうち、自動訂正処理の動作を説明するためのフローチャートである。 FIG. 12 is a flowchart for explaining the operation of the automatic correction process in the handwriting input process that the CPU 11 reads out and executes the handwriting input program 130 </ b> A from the storage unit 13.

この図に示すように、上記第１の実施形態における手書き入力処理のステップＳ１（図６参照）で訂正キー２１が操作されたと判定した場合（ステップＳ１；Ｙｅｓ）には、ＣＰＵ１１は、ＲＡＭ１２から数式表示データ１２３を読み取った後（ステップＵ１）、この数式表示データ１２３に基づいて、手書き入力された数式が所定の関数を有するか否かを判定する（ステップＵ２）。なお、本実施の形態においては、所定の関数として、積分関数や微分係数、総和関数などが用いられている。 As shown in this figure, when it is determined that the correction key 21 is operated in step S1 (see FIG. 6) of the handwriting input process in the first embodiment (step S1; Yes), the CPU 11 starts from the RAM 12. After reading the mathematical expression display data 123 (step U1), it is determined based on the mathematical expression display data 123 whether or not the mathematical expression inputted by hand has a predetermined function (step U2). In the present embodiment, an integral function, a differential coefficient, a summation function, or the like is used as the predetermined function.

このステップＵ２において数式が所定の関数を有しないと判定した場合（ステップＵ２；Ｎｏ）には、ＣＰＵ１１は、数式の自動訂正が不可能である旨のメッセージをディスプレイ３に表示させる（ステップＵ１０）。 When it is determined in step U2 that the mathematical expression does not have a predetermined function (step U2; No), the CPU 11 displays a message on the display 3 that automatic correction of the mathematical expression is impossible (step U10). .

次に、ＣＰＵ１１は、ディスプレイ３の表示内容をステップＵ１の段階まで戻して、ユーザによるマニュアル操作によって数式の訂正を行った後（ステップＵ９）、自動訂正処理を終了して、上述のステップＳ７（図６参照）に移行する。なお、マニュアル操作によって数式の訂正を行うとは、具体的には、上記第１の実施形態の手書き入力処理におけるステップＳ１１〜Ｓ１５の処理によって数式の訂正を行うことを意味する。 Next, the CPU 11 returns the display content of the display 3 to the stage of step U1, corrects the mathematical expression by a manual operation by the user (step U9), ends the automatic correction process, and performs the above-described step S7 ( (See FIG. 6). Note that the correction of the mathematical expression by manual operation specifically means that the mathematical expression is corrected by the processes of steps S11 to S15 in the handwriting input process of the first embodiment.

一方、上述のステップＵ２において数式が所定の関数を有すると判定した場合（ステップＵ２；Ｙｅｓ）には、ＣＰＵ１１は、当該関数の種類と数式表示データ１２３の内容（特に表示位置の情報など）とに基づいて、この関数の構成要素の種類ごとのバッファＢを関数部品バッファ１２５に形成した後、各構成要素についての表示対象を、対応するバッファＢに格納させる（ステップＵ３）。 On the other hand, when it is determined in the above-described step U2 that the mathematical expression has a predetermined function (step U2; Yes), the CPU 11 determines the type of the function and the content of the mathematical expression display data 123 (particularly, information on the display position). Based on the above, after the buffer B for each type of component of this function is formed in the function component buffer 125, the display target for each component is stored in the corresponding buffer B (step U3).

次に、ＣＰＵ１１は、情報の格納されていないバッファＢが関数部品バッファ１２５にあるか否かを判定し（ステップＵ４）、ないと判定した場合（ステップＵ４；Ｎｏ）には、上述のステップＵ１０に移行する。 Next, the CPU 11 determines whether or not the buffer B in which information is not stored is present in the function component buffer 125 (step U4). If it is determined that the buffer B is not stored (step U4; No), the above-described step U10 is performed. Migrate to

一方、ステップＵ４において情報の格納されていないバッファＢがあると判定した場合（ステップＵ４；Ｙｅｓ）、つまり関数内の何れかの構成要素について表示対象が未認識であると判定した場合には、ＣＰＵ１１は、数式表示データ１２３における文字のうち、表示対象が未認識となっている構成要素の表示位置近傍に表示されており、かつ、未だ何れの構成要素の表示対象にもされていない文字を検出し、情報の格納されていないバッファＢに入力する（ステップＵ５）。これにより、情報の格納されていないバッファＢの内容、つまり未認識の構成要素についての表示対象が、未だ何れの構成要素の表示対象にもされていない文字とされる。 On the other hand, if it is determined in step U4 that there is a buffer B in which no information is stored (step U4; Yes), that is, if it is determined that the display target is unrecognized for any component in the function, The CPU 11 displays characters that are displayed in the vicinity of the display position of the component whose display target is unrecognized among the characters in the mathematical expression display data 123 and are not yet displayed as any component. Detected and input to the buffer B where no information is stored (step U5). As a result, the contents of the buffer B in which no information is stored, that is, the display target for the unrecognized component is set as a character that has not yet been set as the display target of any component.

なお、このステップＵ５において情報の格納されていないバッファＢが複数ある場合、つまり関数内の複数の構成要素の表示対象が未認識である場合には、ＣＰＵ１１は、情報の格納されていない何れか１つのバッファＢを選択して、このバッファＢ（以下、選択バッファＢとする）に対応する構成要素の種類をディスプレイ３に表示させるとともに、数式表示データ１２３における文字のうち、未だ何れの構成要素の表示対象にもされていない文字を検出し、入力候補としてディスプレイ３に一覧表示させた後、この中からユーザに選択された文字を、選択バッファＢに入力するようになっている。そして、ＣＰＵ１１は、表示対象が未認識となっている各構成要素について、このような処理を繰り返すようになっている。但し、この処理を繰り返すことで、表示対象が未認識となっている構成要素が１つだけになった場合には、通常のステップＵ５の場合と同様に、数式表示データ１２３における文字のうち、表示対象が未認識となっている構成要素の表示位置近傍に表示されており、かつ、未だ何れの構成要素の表示対象にもされていない文字を検出し、情報の格納されていないバッファＢに自動で入力することとしても良い。 If there are a plurality of buffers B in which no information is stored in step U5, that is, if the display targets of a plurality of components in the function are unrecognized, the CPU 11 does not store any information. One buffer B is selected and the type of the component corresponding to this buffer B (hereinafter referred to as selection buffer B) is displayed on the display 3, and any component among the characters in the mathematical expression display data 123 is not yet displayed. Are detected and displayed as a list on the display 3 as input candidates, and the character selected by the user is input to the selection buffer B. And CPU11 repeats such a process about each component with which the display object is unrecognized. However, by repeating this process, when there is only one component whose display target is unrecognized, as in the normal step U5, among the characters in the mathematical expression display data 123, A character which is displayed in the vicinity of the display position of a component whose display target is unrecognized and which is not yet displayed as a display target of any component is detected and stored in a buffer B in which no information is stored. It is good also as inputting automatically.

次に、ＣＰＵ１１は、関数部品バッファ１２５の内容に基づいて、数式表示データ１２３及び数式テキストデータ１２４の内容と、ディスプレイ３の表示内容とを更新する（ステップＵ７）。 Next, the CPU 11 updates the contents of the formula display data 123 and the formula text data 124 and the display contents of the display 3 based on the contents of the function component buffer 125 (step U7).

次に、ＣＰＵ１１は、更新後の数式の内容が正しいか間違っているかをユーザに選択させ（ステップＵ８）、間違っていると選択された場合（ステップＵ８；Ｎｏ）には上述のステップＵ９に移行し、正しいと選択された場合（ステップＵ８；Ｙｅｓ）には、自動訂正処理を終了して、上述のステップＳ７（図６参照）に移行する。 Next, the CPU 11 causes the user to select whether the content of the updated mathematical expression is correct or incorrect (step U8), and if it is selected as incorrect (step U8; No), the process proceeds to the above-described step U9. If it is selected as correct (step U8; Yes), the automatic correction process is terminated, and the process proceeds to the above-described step S7 (see FIG. 6).

［２．３動作例］
続いて、上記の自動訂正処理について、図１３を参照しながら具体的に説明する。なお、この図１３では、ユーザにより手書き入力された数式の図示を省略している。 [2.3 Example of operation]
Next, the automatic correction process will be specifically described with reference to FIG. In FIG. 13, the mathematical formula input by handwriting by the user is not shown.

まず、ユーザにより数式が手書き入力されて（ステップＳ３）、図１３（ａ）の左上部に示すような積分関数の数式が認識されると（ステップＴ１，Ｔ２）、この数式が自然表示形式のテキストとして表示される（ステップＳ６）。なお、ここで認識された数式では、ユーザが被積分関数として手書き入力した文字「ｘ²」と，積分変数として手書き入力した文字「ｘ」とについて、数式内での認識位置がズレている。 First, when a mathematical formula is input by handwriting by the user (step S3) and a mathematical formula of an integral function as shown in the upper left part of FIG. 13A is recognized (step T1, T2), this mathematical formula is in a natural display format. It is displayed as text (step S6). In the mathematical expression recognized here, the recognition position in the mathematical expression is shifted between the character “x ² ” input by handwriting as an integrand and the character “x” input by handwriting as an integration variable.

この状態から訂正キー２１が操作されると（ステップＳ１；Ｙｅｓ）、数式表示データ１２３で表される数式内に積分関数が含まれると判定され（ステップＵ２；Ｙｅｓ）、関数部品バッファ１２５には、積分記号を格納するバッファＢ１と、被積分関数を格納するバッファＢ２と、積分変数の上限値，下限値を格納するバッファＢ３，Ｂ４と、被積分関数の終了記号を格納するバッファＢ５と、積分変数を格納するバッファＢ６とが形成され、各バッファＢ１〜Ｂ６に対し、図中の右部に示すような内容が格納される（ステップＵ３）。なお、この時点では、被積分関数，積分変数を格納するバッファＢ２，Ｂ４には、情報が格納されておらず、表示対象が未認識な状態となっている。 When the correction key 21 is operated from this state (step S1; Yes), it is determined that the integration function is included in the equation represented by the equation display data 123 (step U2; Yes). A buffer B1 for storing integration symbols, a buffer B2 for storing integrands, buffers B3 and B4 for storing upper and lower limits of integration variables, and a buffer B5 for storing termination symbols for integrands; A buffer B6 for storing integration variables is formed, and the contents shown in the right part of the figure are stored in the buffers B1 to B6 (step U3). At this time, no information is stored in the buffers B2 and B4 that store the integrand and the integration variable, and the display target is unrecognized.

次に、図１３（ｂ）に示すように、情報の格納されていない複数のバッファＢ２，Ｂ４が関数部品バッファ１２５にあると判定された後（ステップＵ４；Ｙｅｓ）、バッファＢ２に対応する構成要素の種類「被積分関数」が表示されるとともに、数式表示データ１２３における文字のうち、未だ何れの構成要素の表示対象にもされていない文字「ｘ²」，「ｘ」がディスプレイ３に一覧表示される。そして、ユーザによって文字「ｘ²」が選択されると、当該文字「ｘ²」がバッファＢ２に入力される。 Next, as shown in FIG. 13B, after it is determined that a plurality of buffers B2 and B4 in which no information is stored are in the function component buffer 125 (step U4; Yes), a configuration corresponding to the buffer B2 The element type “integrated function” is displayed, and among the characters in the mathematical expression display data 123, the characters “x ² ” and “x” that have not yet been displayed as any constituent elements are listed on the display 3. Is displayed. Then, when the character "x ^2" by the user is selected, the character "x ^2" is input to the buffer B2.

また、図１３（ｃ）に示すように、情報の格納されていないバッファＢ４に対応する構成要素の種類「積分変数」が表示されるとともに、数式表示データ１２３における文字のうち、未だ何れの構成要素の表示対象にもされていない文字「ｘ」がディスプレイ３に一覧表示される。そして、ユーザによって文字「ｘ」が選択されると、当該文字「ｘ」がバッファＢ４に入力される。 Further, as shown in FIG. 13C, the component type “integration variable” corresponding to the buffer B4 in which no information is stored is displayed, and any of the characters in the formula display data 123 is not yet configured. Characters “x” that are not displayed as elements are listed on the display 3. When the character “x” is selected by the user, the character “x” is input to the buffer B4.

そして、関数部品バッファ１２５の内容に基づいて、数式表示データ１２３及び数式テキストデータ１２４の内容と、ディスプレイ３の表示内容とが更新される（ステップＵ７）。 Based on the contents of the function component buffer 125, the contents of the formula display data 123 and the formula text data 124 and the display contents of the display 3 are updated (step U7).

以上、本実施の形態によれば、図１２のステップＵ１〜Ｕ７や、図１３等に示したように、手書き入力された数式が所定の関数を有しており、かつ、当該所定の関数における複数の構成要素のうち、何れかの構成要素について表示対象が未認識の場合に、この構成要素についての表示対象を、手書き入力された数式中の文字のうち、未だ何れの構成要素の表示対象にもされていない文字として表示内容が更新されるので、認識した文字自体が合っていて数式内での位置が認識されていない場合であっても、数式中での文字位置が修正されることとなる。従って、数式を再入力する場合と比較して、手書き入力された数式中での文字位置を容易に修正することができる。 As described above, according to the present embodiment, as shown in steps U1 to U7 of FIG. 12, FIG. 13 and the like, the mathematical expression inputted by hand has a predetermined function, and in the predetermined function If the display target is unrecognized for any of the multiple components, the display target for this component is still the display target for any component of the characters in the mathematical expression entered by handwriting The display content is updated as a character that has not been changed, so even if the recognized character is correct and the position in the formula is not recognized, the character position in the formula can be corrected It becomes. Therefore, the character position in the mathematical expression input by handwriting can be easily corrected as compared with the case of re-inputting the mathematical expression.

なお、上記の実施の形態における関数電卓１，１Ａの各構成要素の細部構成及び細部動作に関しては、本発明の趣旨を逸脱しない範囲で適宜変更可能であることは勿論である。 In addition, it is needless to say that the detailed configuration and detailed operation of each component of the scientific calculator 1, 1A in the above embodiment can be appropriately changed without departing from the gist of the present invention.

例えば、上記では関数電卓の動作として説明しているが、タッチパネル付き表示部を有する電子機器に、上記の実施形態で説明した動作を行わせるプログラムをインストールして、当該電子機器のコンピュータにより本発明を実現させるようにしても良い。 For example, although described above as an operation of a scientific calculator, a program for performing the operation described in the above embodiment is installed in an electronic device having a display unit with a touch panel, and the present invention is executed by a computer of the electronic device. May be realized.

１，１Ａ関数電卓
２入力キー群
３ディスプレイ
１１ＣＰＵ
１２ＲＡＭ
１３，１３Ａ記憶部
１４キー入力部
１５表示部
３０タッチパネル
１３０，１３０Ａ手書き入力プログラム 1, 1A Scientific calculator 2 Input key group 3 Display 11 CPU
12 RAM
13, 13A Storage unit 14 Key input unit 15 Display unit 30 Touch panel 130, 130A Handwritten input program

Claims

Display means having a touch panel;
Recognizing a mathematical expression input by handwriting on the touch panel, and displaying the recognized mathematical expression on the display means;
Position change instruction means for receiving a character position change instruction from the user for any of the character parts in the mathematical expression displayed on the display means;
Among the character parts in the mathematical expression displayed on the display means, a designated character part designated by the position change instruction means and a forward character part located before the designated character part are detected, and Candidate display control means for causing the display means to display a plurality of change destination candidates whose positional relationship of the designated character portion with respect to the front character portion is different from each other, and for allowing the user to select any change destination candidate;
Updating means for changing the position of the designated character portion relative to the forward character portion according to the change destination candidate selected by the user, and updating the display content of the display means;
An electronic device comprising:

The handwritten mathematical expression recognition means includes:
Data generation means for generating respective formula data in a display data format for displaying the recognized formula on the display means in a natural display format and a calculation data format for calculating the recognized formula is provided. And
The candidate display control means includes
2. The electronic apparatus according to claim 1, wherein the plurality of change destination candidates are generated based on mathematical expression data in the display data format.

The candidate display control means is at least
A change destination candidate in which the front character portion and the designated character portion are arranged in this order with the same size;
The electronic device according to claim 2, wherein a change destination candidate is generated using the designated character portion as an index of the forward character portion.

A computer of an electronic device provided with display means having a touch panel,
Recognizing a mathematical expression input by handwriting on the touch panel, and displaying the recognized mathematical expression on the display means;
Position change instruction means for receiving a character position change instruction from the user for any of the character parts in the mathematical expression displayed on the display means;
Among the character parts in the mathematical expression displayed on the display means, a designated character part designated by the position change instruction means and a forward character part located before the designated character part are detected, and Candidate display control means for causing the display means to display a plurality of change destination candidates whose positional relationship of the designated character portion with respect to the front character portion is different from each other, and for selecting any of the change destination candidates,
Updating means for changing the position of the designated character portion relative to the forward character portion according to the change destination candidate selected by the user, and updating the display content of the display means;
A program characterized by functioning as