JP4717098B2 - Display operation device - Google Patents

Display operation device Download PDF

Info

Publication number
JP4717098B2
JP4717098B2 JP2008115297A JP2008115297A JP4717098B2 JP 4717098 B2 JP4717098 B2 JP 4717098B2 JP 2008115297 A JP2008115297 A JP 2008115297A JP 2008115297 A JP2008115297 A JP 2008115297A JP 4717098 B2 JP4717098 B2 JP 4717098B2
Authority
JP
Japan
Prior art keywords
pressed
interrupt
icon
touch panel
coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008115297A
Other languages
Japanese (ja)
Other versions
JP2009265976A (en
Inventor
卓也 向井
吉秋 小泉
成憲 中田
真司 服部
敏洋 石川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2008115297A priority Critical patent/JP4717098B2/en
Publication of JP2009265976A publication Critical patent/JP2009265976A/en
Application granted granted Critical
Publication of JP4717098B2 publication Critical patent/JP4717098B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、タッチパネルに対して指またはペンなどの入力手段を用いてクリック操作やドラッグ操作を行うことにより、その押下操作の押下座標に応じた処理を行う表示操作装置に関する。  The present invention relates to a display operation device that performs processing according to the pressed coordinates of a pressing operation by performing a click operation or a drag operation on a touch panel using an input unit such as a finger or a pen.

従来よりこの種の表示操作装置として、設備機器や家電機器などの電気機器を制御する操作端末としての機能を備えた表示操作装置がある。例えば、空調管理システムの分野において、ビル内の空調機器の集中コントローラとしての表示操作装置では、ユーザの利便性を考慮して画面と一体化したタッチパネルを設け、ユーザによるタッチパネル上での押下操作により、機器個別の制御および一括制御などを可能としている。   Conventionally, as this type of display operation device, there is a display operation device having a function as an operation terminal for controlling electrical equipment such as equipment and home appliances. For example, in the field of air conditioning management systems, a display operation device as a centralized controller for air conditioning equipment in a building is provided with a touch panel integrated with the screen in consideration of the convenience of the user, and the user performs a press operation on the touch panel. In addition, individual device control and collective control are possible.

また近年、普及が進んでいるホームネットワークの分野においても、家庭内の家電機器(IHクッキングヒータ、エアコン、照明など)を一括管理するホームコントローラにタッチパネルが用いられてきている。   In recent years, in the field of home networks, which have been widely spread, touch panels have been used as home controllers that collectively manage household electrical appliances (IH cooking heaters, air conditioners, lighting, etc.) in the home.

従来のタッチパネルを用いた表示操作装置の一例について説明する。表示操作装置は、指またはペンなどの入力手段によるタッチパネルへの押下操作を検出するタッチパネルコントローラと、タッチパネルと一体化したディスプレイと、タッチパネルコントローラが検出した押下座標に基づき、その押下座標に対応した処理(押下座標処理)を行うCPUとから構成される。   An example of a display operation device using a conventional touch panel will be described. The display operation device is based on a touch panel controller that detects a press operation on the touch panel by an input unit such as a finger or a pen, a display integrated with the touch panel, and a press coordinate detected by the touch panel controller. And a CPU that performs (pressed coordinate processing).

タッチパネルコントローラは、押下操作の検出に伴い、割込信号をCPUに出力する。CPUは、割込信号の検知により、メイン処理を停止し割込処理を起動させ、タッチパネルコントローラから押下座標を取得し、押下座標をバッファへ格納する処理(座標取得処理)を行う。そして、CPUは、バッファに格納された押下座標に対応した処理(押下座標処理)を行う。押下座標処理では、バッファに押下座標が格納されていることを確認し、電気機器(被制御機器)への制御情報の通信処理やディスプレイへの描画更新処理を実施している。   The touch panel controller outputs an interrupt signal to the CPU upon detection of the pressing operation. Upon detecting the interrupt signal, the CPU stops the main process and starts the interrupt process, acquires the pressed coordinates from the touch panel controller, and stores the pressed coordinates in the buffer (coordinate acquisition process). Then, the CPU performs processing (pressed coordinate processing) corresponding to the pressed coordinate stored in the buffer. In the pressed coordinate processing, it is confirmed that the pressed coordinates are stored in the buffer, and control information communication processing to the electric device (controlled device) and drawing update processing to the display are performed.

従来の表示操作装置では、上記のように処理されるため、割込処理以外の他の処理によりCPUの処理負荷が高くなっている場合であっても、優先的に割込処理が実行されることになり、他の処理に影響を与える可能性がある。   In the conventional display operation device, since the processing is performed as described above, even when the processing load of the CPU is high due to processing other than the interrupt processing, the interrupt processing is preferentially executed. As a result, other processes may be affected.

そこで、CPUの現在の負荷に応じた処理能力で割込処理を行うことにより、他の処理に影響を与えることを少なくすることを可能にした技術がある(例えば、特許文献1参照)。特許文献1では、CPUの現在の処理負荷に応じて変化する押下座標処理の処理間隔をタッチパネルコントローラ側で検知し、その処理間隔に応じてタッチパネルコントローラからCPUに割込信号を出力する間隔、すなわちCPU側に押下座標処理を実行させる間隔を動的に変更するようにしている。   Therefore, there is a technique that makes it possible to reduce the influence on other processes by performing an interrupt process with a processing capacity corresponding to the current load of the CPU (see, for example, Patent Document 1). In Patent Document 1, the processing interval of the pressed coordinate processing that changes according to the current processing load of the CPU is detected on the touch panel controller side, and the interval at which an interrupt signal is output from the touch panel controller to the CPU according to the processing interval, that is, The interval at which the CPU performs the pressed coordinate processing is dynamically changed.

特開2003−84907号公報(第4頁)JP 2003-84907 A (4th page)

上記特許文献1の技術では、押下座標処理の処理間隔、換言すれば押下座標を取得する時間間隔をCPUの処理負荷に応じてタッチパネルコントローラ側が決定している。このため、他の処理によりCPUの負荷が高くなっている場合に、例えばタッチパネル上をペンや指などでなぞるドラッグ操作での文字入力が行われると、押下座標の取得間隔が長くなり、文字認識に十分な精度の押下座標を取得できない可能性がある。そのため文字入力のようなドラッグ操作での押下座標の軌跡を検出する必要がある場合には、他の処理に優先して押下座標を短時間間隔で取得できることが望ましい。   In the technique of Patent Document 1, the touch panel controller side determines the processing interval of the pressed coordinate processing, in other words, the time interval for acquiring the pressed coordinate in accordance with the processing load of the CPU. For this reason, when the CPU load is high due to other processes, for example, when a character input is performed by dragging the touch panel with a pen or a finger, the acquisition interval of the pressed coordinates becomes long, and character recognition is performed. There is a possibility that the pressed coordinates with sufficient accuracy cannot be obtained. Therefore, when it is necessary to detect the locus of the pressed coordinates in a drag operation such as character input, it is desirable that the pressed coordinates can be acquired at short intervals in preference to other processing.

一方、ユーザがタッチパネル上のアイコンを押下する場面では、CPUの動作として、押下座標に配置したアイコンに対応した押下座標処理を実行する。したがって、最初に押下された押下座標を取得できれば十分であり、その後、ユーザがタッチパネルの同様の位置を押下し続けたときの押下座標の取得処理は不要である。このため、押下開始時だけ座標取得処理を取得すればよく、それ以降はCPUの能力を他の処理へ宛がうことによりCPU性能を有効に使用できる。   On the other hand, when the user presses an icon on the touch panel, a pressed coordinate process corresponding to the icon arranged at the pressed coordinate is executed as the operation of the CPU. Therefore, it is sufficient if the first pressed coordinates can be acquired, and then the pressed coordinate acquisition process when the user continues to press the same position on the touch panel is unnecessary. For this reason, it is only necessary to acquire the coordinate acquisition process only at the start of pressing, and thereafter, the CPU performance can be effectively used by assigning the CPU capability to other processes.

本発明はこのような点に鑑みなされたもので、表示操作装置全体の制御を行うCPUが、押下座標を取得する取得処理間隔をCPU主導で設定可能とし、押下座標の取得数優先かまたはCPU処理負荷の軽減優先かを柔軟に選択することが可能な表示操作装置を提供することを目的とする。   The present invention has been made in view of the above points, and allows the CPU that controls the entire display operation device to set the acquisition processing interval for acquiring the pressed coordinates, with priority given to the acquisition number of the pressed coordinates, or the CPU. An object of the present invention is to provide a display operation device capable of flexibly selecting whether to reduce the processing load.

本発明に係る表示操作装置は、タッチパネルへの押下操作の押下座標に応じた処理を行う表示操作装置であって、画面を表示する表示手段と、表示手段の画面上に形成されたタッチパネルと、タッチパネルへの押下座標を検出する押下検出手段と、押下検出手段で検出された押下座標に応じた処理および装置全体の制御を行うと共に、押下座標に応じてタッチパネルに対するユーザの入力方式を切り替える処理手段と、割込信号を処理手段に出力する割込制御手段とを備え、処理手段は、押下検出手段で検出された押下座標に応じた入力方式に基づいて割込間隔を決定し、割込制御手段に通知する割込間隔決定手段を有し、通知に応じて割込制御手段から割込間隔で出力されてくる割込信号を受信すると、押下検出手段から押下座標を取得するものである。 A display operation device according to the present invention is a display operation device that performs processing according to the pressed coordinates of a pressing operation on a touch panel, and includes a display unit that displays a screen, a touch panel formed on the screen of the display unit, Press detection means for detecting coordinates pressed on the touch panel, and processing means for performing processing according to the press coordinates detected by the press detection means and controlling the entire apparatus , and switching a user input method to the touch panel according to the press coordinates And an interrupt control means for outputting an interrupt signal to the processing means, and the processing means determines the interrupt interval based on the input method corresponding to the pressed coordinates detected by the press detection means, and performs interrupt control. Having an interrupt interval determining means for notifying the means, and upon receiving an interrupt signal output at an interrupt interval from the interrupt control means in response to the notification, obtains the pressed coordinates from the press detecting means. It is intended.

本発明によれば、装置全体の制御を行う処理手段が、押下検出手段から押下座標を取得する割込間隔を、押下検出手段で検出された押下座標に応じた入力方式に基づいて決定するので、押下座標の取得数優先かまたはCPU処理負荷の軽減優先かをタッチパネル上の押下操作に応じて柔軟に選択することが可能となる。 According to the present invention, the processing means for controlling the entire apparatus determines the interrupt interval for acquiring the pressed coordinates from the pressed detection means based on the input method corresponding to the pressed coordinates detected by the pressed detection means. It is possible to flexibly select whether to give priority to the number of acquired pressed coordinates or to reduce CPU processing load according to the pressing operation on the touch panel.

本発明は、タッチパネルを有し、そのタッチパネルへの押下操作により、押下座標に応じた処理を行う表示操作装置であって、ここでは特に、家庭内の家電機器や設備機器など電気機器がネットワークを構成するシステムにおいて、これらの電気機器と接続され、これらを制御する操作端末としても機能する表示操作装置について説明する。本発明は、表示操作装置全体の制御を行うCPUが、タッチパネルに接続されたタッチパネルコントローラから押下座標を取得する取得処理間隔を、タッチパネルコントローラ主導ではなくCPU主導で設定可能とし、短時間間隔で押下座標の取得が必要な場合には、押下座標の取得処理を他の処理に優先してCPUで行うようにしたことに一つの特徴を有している。以下の実施の形態1〜3では、CPU主導で、押下座標の取得回数を制御するための各種構成について順に説明する。   The present invention is a display operation device that has a touch panel and performs processing according to the pressed coordinates by a pressing operation on the touch panel. Here, in particular, electric appliances such as home appliances and equipment in a home network. A display operation device that is connected to these electric devices and functions also as an operation terminal for controlling them in the system to be configured will be described. The present invention enables the CPU that controls the entire display operation device to set the acquisition processing interval for acquiring the pressed coordinates from the touch panel controller connected to the touch panel, not by the touch panel controller but by the CPU, and can be pressed at short intervals. In the case where it is necessary to acquire coordinates, one feature is that the acquisition processing of the pressed coordinates is performed by the CPU in preference to other processing. In the following first to third embodiments, various configurations for controlling the number of times pressed coordinates are acquired under CPU initiative will be described in order.

実施の形態1.
実施の形態1の表示操作装置は、表示画面に電源アイコンや強弱切替アイコンなどを描画し、これらアイコンを選択押下することにより、ユーザがタッチパネル上に入力する際の入力方式を切り替えながらアイコンに応じたアプリケーションを動作させる。入力方式としては、ここでは例えばアイコンを単に選択・非選択する「選択入力モード」と、ペンなどの入力手段により文字入力を可能とする「ペン入力モード」との2種類の入力方式がある。実施の形態1の表示操作装置は、その入力方式に応じて、タッチパネルの押下座標の取得間隔を動的に変更するようにしたものである。
Embodiment 1 FIG.
The display operation device according to the first embodiment draws a power supply icon, a strength switching icon, and the like on the display screen, and selects and presses these icons to change the input method when the user inputs data on the touch panel, depending on the icon. Run the application. Here, there are two types of input methods, for example, a “selection input mode” in which icons are simply selected / deselected and a “pen input mode” in which characters can be input by an input means such as a pen. The display operation device according to the first embodiment dynamically changes the acquisition interval of the pressed coordinates of the touch panel according to the input method.

図1は、本実施の形態1における表示操作装置のブロック図である。
図1における表示操作装置は、タッチパネル1と、押下検出手段21、割込間隔設定手段22、割込制御手段23および座標送信手段24を備えるタッチパネルコントローラ2と、割込間隔決定手段31、座標受信手段32、中央演算手段33、割込受付手段34および入力方式記憶手段40を備える処理手段としてのCPU3と、表示手段4と、通信手段5とを備えている。
FIG. 1 is a block diagram of the display operation device according to the first embodiment.
The display operation device in FIG. 1 includes a touch panel 1, a touch detection controller 21 including a press detection unit 21, an interrupt interval setting unit 22, an interrupt control unit 23, and a coordinate transmission unit 24, an interrupt interval determination unit 31, and coordinate reception. A CPU 3 as a processing means including a means 32, a central processing means 33, an interrupt receiving means 34 and an input method storage means 40, a display means 4, and a communication means 5 are provided.

タッチパネル1は、ユーザの指およびペンなどの入力手段による押圧操作を受け付けるインタフェースであり、表示手段4の画面上に形成されている。   The touch panel 1 is an interface that accepts a pressing operation by an input means such as a user's finger and pen, and is formed on the screen of the display means 4.

以下、まずタッチパネルコントローラ2の構成について説明する。
押下検出手段21は、タッチパネル1が押下されていることを検出し、押下されていることを割込制御手段23に出力するとともに、その押下座標を座標送信手段24からの要求に応じて所定の時間間隔(後述の割込間隔)で座標送信手段24に出力する。
Hereinafter, the configuration of the touch panel controller 2 will be described first.
The press detection unit 21 detects that the touch panel 1 is pressed, outputs the pressed state to the interrupt control unit 23, and sets the pressed coordinates in accordance with a request from the coordinate transmission unit 24. It outputs to the coordinate transmission means 24 by a time interval (interrupt interval mentioned later).

割込制御手段23は、CPU3が有する割込受付手段34に割込信号を出力する。割込信号の割込受付手段34への出力タイミングは、CPU3側の割込間隔決定手段31で決定され、割込間隔設定手段22に設定された割込間隔に基づくものである。また、割込制御手段23は、割込信号の出力開始後、座標送信手段24からの割込信号出力停止の指示を受信すると、割込信号の出力を停止する。   The interrupt control means 23 outputs an interrupt signal to the interrupt reception means 34 that the CPU 3 has. The output timing of the interrupt signal to the interrupt receiving means 34 is determined by the interrupt interval determining means 31 on the CPU 3 side and is based on the interrupt interval set in the interrupt interval setting means 22. Further, the interrupt control means 23 stops outputting the interrupt signal when receiving an instruction to stop the interrupt signal output from the coordinate transmitting means 24 after the output of the interrupt signal is started.

割込間隔設定手段22は、CPU3が有する割込間隔決定手段31が決定した割込間隔を設定する。   The interrupt interval setting unit 22 sets the interrupt interval determined by the interrupt interval determination unit 31 included in the CPU 3.

座標送信手段24は、CPU3が有する座標受信手段32からの押下座標取得要求に応じて前記押下検出手段21が検出した押下座標を、CPU3の座標受信手段32に出力する。また、押下座標の出力完了後に、割込制御手段23に対して割込信号の出力停止を指示する。   The coordinate transmission unit 24 outputs the pressed coordinates detected by the pressing detection unit 21 to the coordinate receiving unit 32 of the CPU 3 in response to the pressed coordinate acquisition request from the coordinate receiving unit 32 of the CPU 3. Further, after the output of the pressed coordinates is completed, the interrupt control means 23 is instructed to stop outputting the interrupt signal.

次に、CPU3の構成について説明する。
中央演算手段33では、本表示操作装置でのソフトウェア処理を行う。ソフトウェア処理は、通常実行されているメイン処理と割込発生時に実行する割込処理とに分類される。メイン処理では、座標受信手段32が受信した押下座標に基づいて、表示手段4が表示する表示内容の更新処理、表示操作装置の入力方式の切り替え処理、電気機器との制御情報の授受を通信手段5を介して行う通信処理などを行う。割込処理は、タッチパネルコントローラ2から割込受付手段34を介して割込信号を受信した際に起動する処理であり、座標受信手段32を介してタッチパネルコントローラ2の座標送信手段24から押下座標を取得する座標取得処理を行う。
Next, the configuration of the CPU 3 will be described.
The central processing means 33 performs software processing in the display operation device. Software processing is classified into main processing that is normally executed and interrupt processing that is executed when an interrupt occurs. In the main process, based on the pressed coordinates received by the coordinate receiving means 32, the display contents updating process displayed by the display means 4, the input method switching process of the display operation device, and the transfer of control information to and from the electrical equipment are communicated. 5 performs communication processing performed through 5. The interrupt process is a process that starts when an interrupt signal is received from the touch panel controller 2 via the interrupt acceptance means 34, and the pressed coordinates are obtained from the coordinate transmission means 24 of the touch panel controller 2 via the coordinate reception means 32. Coordinate acquisition processing is performed.

また中央演算手段33は、メイン処理実行中に割込受付手段34が割込信号を検出した場合、該メイン処理を中断し、割込処理を開始する。そして、割込処理の終了後に、中断していたメイン処理を再開する。また、中央演算手段33は、押下座標を受信すると、その押下座標に配置されたアイコンに基づいて入力方式を決定し、決定した入力方式を入力方式記憶手段40に記憶する。   When the interrupt receiving means 34 detects an interrupt signal during execution of the main process, the central processing means 33 interrupts the main process and starts the interrupt process. Then, after the interruption process is completed, the interrupted main process is resumed. Further, when receiving the pressed coordinates, the central processing means 33 determines an input method based on the icon arranged at the pressed coordinates, and stores the determined input method in the input method storage means 40.

割込受付手段34は、タッチパネルコントローラ2が有する割込制御手段23が出力する割込信号を検知し、検知した旨を中央演算手段33に通知する。   The interrupt receiving unit 34 detects an interrupt signal output from the interrupt control unit 23 included in the touch panel controller 2 and notifies the central processing unit 33 of the detection.

座標受信手段32は、前記中央演算手段33からの要求により、タッチパネルコントローラ2側の座標送信手段24に押下座標取得要求を送信して押下座標を受信する。   In response to a request from the central processing means 33, the coordinate receiving means 32 transmits a pressed coordinate acquisition request to the coordinate transmitting means 24 on the touch panel controller 2 side and receives the pressed coordinates.

入力方式記憶手段40は、現在設定されている入力方式を記憶している。入力方式には、上述したように「ペン入力モード」と「選択入力モード」とがあり、入力方式は、表示手段4に表示される画面上の各アイコン毎に予め設定され、その設定内容は中央演算手段33に記憶されている。   The input method storage means 40 stores the currently set input method. As described above, the input method includes the “pen input mode” and the “selection input mode”. The input method is set in advance for each icon on the screen displayed on the display unit 4, and the setting contents are as follows. It is stored in the central processing means 33.

割込間隔決定手段31は、入力方式毎に予め設定された割込間隔を内部に記憶しており、入力方式記憶手段40に記憶設定されている入力方式に対応した割込間隔を決定し、その決定した割込間隔を割込間隔設定手段22に出力する。   The interrupt interval determination means 31 stores therein an interrupt interval preset for each input method, determines an interrupt interval corresponding to the input method stored and set in the input method storage means 40, The determined interrupt interval is output to the interrupt interval setting means 22.

割込間隔決定手段31は、入力方式記憶手段40が有する入力方式の変更を監視し、該入力方式が変更された場合、入力方式ごとに予め規定した割込間隔を、タッチパネルコントローラ2が有する割込間隔設定手段22に出力する。   The interrupt interval determination means 31 monitors the change of the input method of the input method storage means 40, and when the input method is changed, the touch panel controller 2 has an interrupt interval defined in advance for each input method. To the interval setting means 22.

表示手段4は、画像や文字を表示するディスプレイである。   The display means 4 is a display that displays images and characters.

通信手段5は、ネットワークを介して電気機器と接続しており、中央演算手段33の要求に応じて該電気機器と制御情報を授受する。   The communication unit 5 is connected to an electrical device via a network, and exchanges control information with the electrical device in response to a request from the central processing unit 33.

次に、本実施の形態1の表示操作装置におけるタッチパネルコントローラ2の動作について説明する。   Next, the operation of the touch panel controller 2 in the display operation device according to the first embodiment will be described.

図2は、実施の形態1の表示操作装置におけるタッチパネルコントローラ2の動作を示すフローチャートである。
タッチパネルコントローラ2は電源投入後、押下検出手段21によりタッチパネル1への押圧が検出されたかどうかを割込制御手段23でチェックしており(S1)、押下が検出されるまで待機する。すなわち、押下検出手段21は、タッチパネル1への押圧状況(押下開始、押下中)を検出し、その検出結果を割込制御手段23に出力しており、割込制御手段23は、押下検出手段21からの結果に応じてタッチパネル1への押圧が検出されたかどうかをチェックしている。
FIG. 2 is a flowchart showing the operation of the touch panel controller 2 in the display operation device of the first embodiment.
After the power is turned on, the touch panel controller 2 checks whether or not the touch detection unit 21 detects a press on the touch panel 1 with the interrupt control unit 23 (S1), and waits until a press is detected. In other words, the press detection unit 21 detects a pressing state (starting pressing, during pressing) on the touch panel 1, and outputs the detection result to the interrupt control unit 23. The interrupt control unit 23 includes the press detection unit 23. It is checked whether or not a press on the touch panel 1 is detected according to the result from 21.

割込制御手段23は、押下検出手段21がタッチパネル1への押圧を検出した場合、割込信号の出力するタイミングか否かを、割込間隔設定手段22が設定する割込間隔に基づいてチェックする。すなわち、前回割込信号を出力開始してからの経過時間が割込間隔以上であるかどうかをチェックし(S2)、割込間隔以上である場合に割込信号を出力開始し(S3)、該経過時間が割込間隔未満である場合には割込信号を出力せずステップS1へ戻る。   The interrupt control means 23 checks whether or not it is the timing to output an interrupt signal based on the interrupt interval set by the interrupt interval setting means 22 when the press detection means 21 detects a press on the touch panel 1. To do. That is, it is checked whether the elapsed time from the start of the previous interrupt signal output is equal to or greater than the interrupt interval (S2), and if it is equal to or greater than the interrupt interval, the interrupt signal output is started (S3). If the elapsed time is less than the interrupt interval, no interrupt signal is output and the process returns to step S1.

そして、座標送信手段24は、割込制御手段23から割込信号をCPU3に出力したことによってCPU3の座標受信手段32から出力される押下座標取得要求を待機し続け、該押下座標取得要求を受信すると(S4)、押下検出手段21に押下座標を要求して受信し、CPU3側の座標受信手段32に出力する(S5)。そして押下座標の出力完了後、座標送信手段24は割込制御手段23に割込信号の出力停止を指示する。該指示を受けた割込制御手段23は割込信号を停止し(S6)、ステップS1へ戻る。   Then, the coordinate transmission unit 24 continues to wait for the pressed coordinate acquisition request output from the coordinate receiving unit 32 of the CPU 3 by outputting the interrupt signal from the interrupt control unit 23 to the CPU 3, and receives the pressed coordinate acquisition request. Then, it requests and receives the pressed coordinates from the pressing detection means 21 and outputs it to the coordinate receiving means 32 on the CPU 3 side (S5). After completing the output of the pressed coordinates, the coordinate transmission unit 24 instructs the interrupt control unit 23 to stop outputting the interrupt signal. Receiving the instruction, the interrupt control means 23 stops the interrupt signal (S6) and returns to step S1.

次に、本実施の形態1の表示操作装置におけるCPU3の動作について説明する。
図3は、実施の形態1の表示操作装置におけるCPU3の動作を示すフローチャートである。
Next, the operation of the CPU 3 in the display operation device according to the first embodiment will be described.
FIG. 3 is a flowchart illustrating the operation of the CPU 3 in the display operation device according to the first embodiment.

CPU3は、電源投入後、表示手段4への初期画面の表示、通信手段5の初期化、入力方式を「選択入力モード」へ初期設定などといった初期化処理を行い(S11)、その後、メイン処理を起動する(S12)。   After the power is turned on, the CPU 3 performs an initialization process such as displaying an initial screen on the display unit 4, initializing the communication unit 5, and initializing the input method to "selection input mode" (S11), and then performing a main process. Is activated (S12).

中央演算手段33はメイン処理を実行しており、電気機器との制御情報との通信処理や、該制御情報に基づいて表示手段4への表示内容の更新処理などを繰り返し行っている。また、メイン処理ではタッチパネルコントローラ2からの押下座標がバッファ33aに格納されていることを監視しており、バッファ33aに押下座標が格納されていない場合には(S13)、メイン処理を継続して行い(S14)、バッファ33aに押下座標が格納された場合には、押下座標処理を行う(S15)。   The central processing unit 33 executes main processing, and repeatedly performs communication processing with control information with the electrical equipment, update processing of display contents on the display unit 4 based on the control information, and the like. In the main process, it is monitored that the pressed coordinates from the touch panel controller 2 are stored in the buffer 33a. If the pressed coordinates are not stored in the buffer 33a (S13), the main process is continued. (S14) When the pressed coordinates are stored in the buffer 33a, the pressed coordinates processing is performed (S15).

ところで、タッチパネルコントローラ2側でタッチパネル1への押圧が検出された場合、タッチパネルコントローラ2からCPU3に割込信号の出力が開始されるが(図2のステップS3)、CPU3は、その割込信号の出力開始を検知すると、割込処理を行う。   By the way, when the touch panel controller 2 detects that the touch panel 1 is pressed, the touch panel controller 2 starts outputting an interrupt signal to the CPU 3 (step S3 in FIG. 2). When the start of output is detected, interrupt processing is performed.

図4は、割込処理の流れを示すフローチャートである。
CPU3の割込受付手段34は、タッチパネルコントローラ2の割込制御手段23から出力される割込信号の出力開始を検知すると(S21)、検知した旨を中央演算手段33に通知し、中央演算手段33ではステップS12において実行中のメイン処理を中断し(S22)、座標取得処理を開始する(S23)。
FIG. 4 is a flowchart showing the flow of interrupt processing.
When the interrupt receiving means 34 of the CPU 3 detects the start of the output of the interrupt signal output from the interrupt control means 23 of the touch panel controller 2 (S21), it notifies the central processing means 33 of the detection, and the central processing means 33 In 33, the main process being executed in step S12 is interrupted (S22), and the coordinate acquisition process is started (S23).

図5は、図4の座標取得処理の流れを示すフローチャートである。
座標取得処理では、中央演算手段33が、座標受信手段32を介してタッチパネルコントローラ2に押下座標を要求し(S23a)、該要求に応じてタッチパネルコントローラ2から送信されてくる押下座標を受信する(S23b)。そして、該押下座標を内部のバッファ33aに格納し(S23c)、座標取得処理を終了する。
FIG. 5 is a flowchart showing the flow of the coordinate acquisition process of FIG.
In the coordinate acquisition process, the central processing unit 33 requests the touched coordinate from the touch panel controller 2 via the coordinate receiving unit 32 (S23a), and receives the pressed coordinate transmitted from the touch panel controller 2 in response to the request (S23a). S23b). Then, the pressed coordinates are stored in the internal buffer 33a (S23c), and the coordinate acquisition process is terminated.

中央演算手段33は、座標取得処理を終了すると、図4に示す割込終了処理すなわち座標取得処理前に中断した地点からメイン処理を再開する(S24)。   When the coordinate calculation process is completed, the central processing means 33 resumes the main process from the interrupted process shown in FIG. 4, that is, the point where the process was interrupted before the coordinate acquisition process (S24).

なお、CPU3は、上述したようにバッファ33aに押下座標が格納された場合、押下座標処理(図3のステップS15)を行うが、以下、押下座標処理について説明する。   The CPU 3 performs the pressed coordinate processing (step S15 in FIG. 3) when the pressed coordinates are stored in the buffer 33a as described above. The pressed coordinate processing will be described below.

図6は、図3の押下座標処理の流れを示すフローチャートである。
中央演算手段33は、バッファ33aに格納された押下座標に配置されているアイコンに対応する処理を行う(S15a)。すなわち、例えば入力方式の切替処理や表示手段4への表示内容の更新処理を行う。そして、中央演算手段33は、バッファ33aに格納された押下座標に配置されているアイコンに対応する入力方式をチェックし(S15b)、押下座標に配置されているアイコンが電気機器名の入力開始を要求するアイコンならば、入力方式記憶手段40の内容を「ペン入力モード」に書き換え、図7に示すような文字入力受付画面(ペン入力画面)を表示手段4に表示する(S15c)。割込間隔決定手段31は、入力方式が変更されたことを検出し、「ペン入力モード」時の割込間隔(50ms)をタッチパネルコントローラ2が有する割込間隔設定手段22に出力して設定する(S15d)。
FIG. 6 is a flowchart showing the flow of the pressed coordinate processing of FIG.
The central processing means 33 performs a process corresponding to the icon arranged at the pressed coordinate stored in the buffer 33a (S15a). That is, for example, an input method switching process and a display content updating process on the display unit 4 are performed. Then, the central processing means 33 checks the input method corresponding to the icon arranged at the pressed coordinates stored in the buffer 33a (S15b), and the icon arranged at the pressed coordinates starts the input of the electric device name. If the requested icon, the content of the input method storage means 40 is rewritten to “pen input mode”, and a character input acceptance screen (pen input screen) as shown in FIG. 7 is displayed on the display means 4 (S15c). The interrupt interval determining unit 31 detects that the input method has been changed, and outputs and sets the interrupt interval (50 ms) in the “pen input mode” to the interrupt interval setting unit 22 of the touch panel controller 2. (S15d).

一方、ステップS15bの結果が「選択入力モード」であれば、具体的には例えば前記押下座標に配置されているアイコンがペン入力確定アイコンならば、入力方式記憶手段40の内容を「選択入力モード」とする。割込間隔決定手段31は、入力方式記憶手段40が更新されたことを検出し、「選択入力モード」時の割込間隔(500ms)をタッチパネルコントローラ2が有する割込間隔設定手段22に出力して設定する(S15e)。なお、前回の押下座標処理時に、電気機器名の入力開始を要求するアイコンが押下された後、今回の押下座標処理時にペン入力確定アイコンが押下された場合には、入力方式記憶手段40の内容を「選択入力モード」とした後、表示手段4の画面を、文字入力受付画面から、該文字入力受付画面の表示前に表示していた画面に戻す制御を行うものとする。   On the other hand, if the result of step S15b is “selection input mode”, specifically, for example, if the icon arranged at the pressed coordinate is a pen input confirmation icon, the content of the input method storage means 40 is changed to “selection input mode”. " The interrupt interval determination unit 31 detects that the input method storage unit 40 has been updated, and outputs the interrupt interval (500 ms) in the “selection input mode” to the interrupt interval setting unit 22 included in the touch panel controller 2. (S15e). Note that if the pen input confirmation icon is pressed during the current pressed coordinate processing after the icon that requests the start of input of the electrical device name is pressed during the previous pressed coordinate processing, the contents of the input method storage unit 40 Is set to the “selection input mode”, and control is performed to return the screen of the display means 4 from the character input acceptance screen to the screen displayed before the display of the character input acceptance screen.

本実施の形態1によれば、タッチパネル1が押下された押下座標に応じて入力方式を設定し、その入力方式に応じてCPU3が割込間隔を決定するようにしているので、CPU主導で割込間隔を決定することができ、押下座標の取得数優先かまたはCPU処理負荷の軽減優先かをタッチパネル上の押下操作に応じて柔軟に選択することが可能となる。具体的には、入力方式が「選択入力モード」の場合、割込間隔を長い間隔に設定することにより、タッチパネルコントローラ2の割込信号の出力間隔が長くなり、CPU3にてメイン処理を中断し割込処理を起動させる回数を抑制できる。したがってCPU処理負荷を抑制でき、割込処理が他の処理へ影響を及ぼすことを回避できる。すなわち、押下開始時の押下座標が分かればよく、その後も押下続けている間に通知される押下座標が不要なアイコンについては、割込間隔を長くして割込処理を起動させる回数を抑制してCPU処理負荷を抑制するものである。   According to the first embodiment, the input method is set according to the pressed coordinates when the touch panel 1 is pressed, and the CPU 3 determines the interrupt interval according to the input method. The insertion interval can be determined, and it is possible to flexibly select whether the priority is to obtain the number of pressed coordinates or to reduce the CPU processing load according to the pressing operation on the touch panel. Specifically, when the input method is “selection input mode”, by setting the interrupt interval to a long interval, the output interval of the interrupt signal of the touch panel controller 2 becomes longer, and the CPU 3 interrupts the main process. The number of times the interrupt process is activated can be suppressed. Therefore, the CPU processing load can be suppressed, and the influence of the interrupt process on other processes can be avoided. In other words, it is only necessary to know the pressed coordinates at the start of pressing, and for icons that do not require the pressed coordinates that are notified while continuing to press, the number of times that interrupt processing is started by increasing the interrupt interval is suppressed. This suppresses the CPU processing load.

また、入力方式が「ペン入力モード」のように、正確に文字認識を行うため短い間隔で押下座標を取得する必要がある場合には、割込間隔を短く設定することにより、タッチパネルコントローラ2の割込信号の出力間隔が短くなり、短時間間隔で押下座標を取得できる。このときCPU処理負荷が増加するため、他の処理に影響を及ぼす可能性があるが、正確に文字認識を行うことが可能となる。   In addition, when the input method is “pen input mode” and it is necessary to acquire the pressed coordinates at a short interval for accurate character recognition, by setting the interrupt interval short, the touch panel controller 2 The output interval of the interrupt signal is shortened, and the pressed coordinates can be acquired at short intervals. At this time, the CPU processing load increases, which may affect other processes, but it is possible to perform character recognition accurately.

実施の形態2.
実施の形態2の表示操作装置は、押下座標に配置されているアイコンの動作属性(クリック可、ドラッグ移動可)に応じて、CPU3がタッチパネルコントローラ2から押下座標を取得する押下座標取得条件(回数や取得間隔)を動的に変更するものである。
Embodiment 2. FIG.
The display operation device according to the second embodiment is configured so that the CPU 3 acquires the pressed coordinate from the touch panel controller 2 in accordance with the operation attribute (clickable and draggable) of the icon arranged at the pressed coordinate (number of times). And acquisition interval) are dynamically changed.

図8は、本実施の形態2における表示操作装置のブロック図である。
図8における表示操作装置は、タッチパネル1と、押下検出手段21、割込モード設定手段25、割込制御手段23、座標送信手段24、割込モード設定手段25および操作状態検出手段26を備えるタッチパネルコントローラ2と、割込モード決定手段35、座標受信手段32、中央演算手段33、割込受付手段34、アイコン管理手段36および表示制御手段37を備えるCPU3と、表示手段4と、通信手段5とを備えている。
FIG. 8 is a block diagram of the display operation device according to the second embodiment.
The display operation device in FIG. 8 includes a touch panel 1, a press detection unit 21, an interrupt mode setting unit 25, an interrupt control unit 23, a coordinate transmission unit 24, an interrupt mode setting unit 25, and an operation state detection unit 26. CPU 3 including controller 2, interrupt mode determining means 35, coordinate receiving means 32, central processing means 33, interrupt receiving means 34, icon management means 36 and display control means 37, display means 4, communication means 5 It has.

タッチパネル1は、ユーザの指およびペンなどの入力手段による押圧操作を受け付けるインタフェースであり、表示手段4の画面上に形成されている。   The touch panel 1 is an interface that accepts a pressing operation by an input means such as a user's finger and pen, and is formed on the screen of the display means 4.

以下、まずタッチパネルコントローラ2の構成について説明する。
押下検出手段21は、前記タッチパネル1が押下されていることを検出し、押下されていることを操作状態検出手段26に出力するとともに、その押下座標を座標送信手段24からの要求に応じて座標送信手段24に出力する。
Hereinafter, the configuration of the touch panel controller 2 will be described first.
The press detection unit 21 detects that the touch panel 1 is pressed, outputs the pressed state to the operation state detection unit 26, and coordinates the pressed coordinates in response to a request from the coordinate transmission unit 24. Output to the transmission means 24.

操作状態検出手段26は、押下検出手段21の検出結果に基づいてタッチパネル1に対するユーザの操作状態を検出する。操作状態には「リリース」、「押下開始」および「押下中」があり、それぞれタッチパネル1が押圧されていない状態、押圧を開始した状態、押圧が解除されずに押圧が続いている状態を表す。   The operation state detection unit 26 detects the operation state of the user with respect to the touch panel 1 based on the detection result of the press detection unit 21. The operation states include “release”, “pressing start”, and “pressing”, and each represents a state where the touch panel 1 is not pressed, a state where pressing is started, and a state where pressing continues without being released. .

割込制御手段23は、CPU3が有する割込受付手段34に割込信号を出力する。割込信号の割込受付手段34への出力タイミングは、CPU3側の割込モード決定手段35で決定され、割込モード設定手段25に設定された後述の割込モードと、操作状態検出手段26が検出した操作状態との組み合わせに応じた出力条件(割込間隔)に基づくものであり、割込制御手段23に予め割込間隔として設定されている。また、割込制御手段23は、割込信号の出力開始後、座標送信手段24からの割込信号出力停止の指示を受信すると、割込信号の出力を停止する。   The interrupt control means 23 outputs an interrupt signal to the interrupt reception means 34 that the CPU 3 has. The output timing of the interrupt signal to the interrupt receiving means 34 is determined by the interrupt mode determining means 35 on the CPU 3 side, and an interrupt mode described later set in the interrupt mode setting means 25 and the operation state detecting means 26. Is based on an output condition (interrupt interval) corresponding to the combination with the detected operation state, and is preset in the interrupt control means 23 as an interrupt interval. Further, the interrupt control means 23 stops outputting the interrupt signal when receiving an instruction to stop the interrupt signal output from the coordinate transmitting means 24 after the output of the interrupt signal is started.

割込モード設定手段25は、CPU3が有する割込モード決定手段35が決定した割込モードを設定する。ここで、割込モードには、「簡易モード」と「詳細モード」とがあり、画面に表示されるアイコンの後述の動作属性毎に予め設定されており、タッチパネル1が押下されたときのその押下座標に配置されたアイコンの動作属性に応じてCPU3が有する割込モード決定手段35によって決定されるようになっている。割込モードは、具体的には例えば背景画像や決定ボタンなど、ドラッグ移動ができないアイコンは「簡易モード」に設定され、ドラッグ移動可能なアイコンは「詳細モード」に設定される。   The interrupt mode setting unit 25 sets the interrupt mode determined by the interrupt mode determination unit 35 included in the CPU 3. Here, the interrupt mode includes a “simple mode” and a “detail mode”, which are set in advance for each operation attribute to be described later of the icon displayed on the screen, and when the touch panel 1 is pressed. It is determined by the interrupt mode determining means 35 of the CPU 3 according to the operation attribute of the icon arranged at the pressed coordinate. Specifically, in the interrupt mode, for example, an icon that cannot be dragged such as a background image or a determination button is set to “simple mode”, and an icon that can be dragged is set to “detailed mode”.

座標送信手段24は、CPU3が有する座標受信手段32からの要求に応じて前記操作状態検出手段26が検出した操作状態および前記押下検出手段21が検出した押下座標を、座標受信手段32に出力する。また、操作状態ならびに押下座標の出力完了後に、割込制御手段23に対して割込信号の出力停止を指示する。   The coordinate transmission unit 24 outputs the operation state detected by the operation state detection unit 26 and the pressed coordinate detected by the press detection unit 21 to the coordinate reception unit 32 in response to a request from the coordinate reception unit 32 of the CPU 3. . In addition, after completion of the output of the operation state and the pressed coordinates, the interrupt control means 23 is instructed to stop outputting the interrupt signal.

次に、CPU3の構成について説明する。
中央演算手段33では、本表示操作装置でのソフトウェア処理を行う。ソフトウェア処理は、通常実行されているメイン処理と割込発生時に実行する割込処理とに分類される。メイン処理では、座標受信手段32が受信した操作状態および押下座標に基づいて、表示制御手段37を介して表示手段4が表示する表示内容の更新処理、該押下座標の割込モード決定手段35への通知、アイコン管理手段36が管理するアイコンの操作状態およびアイコンが配置されている表示座標の更新処理、電気機器との制御情報の授受を通信手段5を介して行う通信処理などを行う。割込処理は、タッチパネルコントローラ2から割込受付手段34を介して割込信号を受信した際に起動する処理であり、座標受信手段32を介してタッチパネルコントローラ2の座標送信手段24から操作状態および押下座標を取得する処理を行う。
Next, the configuration of the CPU 3 will be described.
The central processing means 33 performs software processing in the display operation device. Software processing is classified into main processing that is normally executed and interrupt processing that is executed when an interrupt occurs. In the main processing, based on the operation state and the pressed coordinates received by the coordinate receiving means 32, the display contents displayed on the display means 4 are updated via the display control means 37, and the pressed coordinate interrupt mode determining means 35 is updated. Notification processing, update operation of the icon managed by the icon management means 36 and display coordinates where the icon is arranged, communication processing for transmitting / receiving control information to / from the electric device through the communication means 5 and the like. The interrupt process is a process that is started when an interrupt signal is received from the touch panel controller 2 via the interrupt accepting unit 34. A process for acquiring the pressed coordinates is performed.

また、中央演算手段33は、メイン処理実行中に割込受付手段34が割込信号を検出した場合、該メイン処理を中断し、割込処理を開始する。そして、割込処理の終了後に、中断していたメイン処理を再開する。   Further, when the interrupt receiving means 34 detects an interrupt signal during execution of the main process, the central processing means 33 interrupts the main process and starts the interrupt process. Then, after the interruption process is completed, the interrupted main process is resumed.

割込受付手段34は、タッチパネルコントローラ2が有する割込制御手段23が出力する割込信号を検知し、検知した旨を中央演算手段33に通知する。   The interrupt receiving unit 34 detects an interrupt signal output from the interrupt control unit 23 included in the touch panel controller 2 and notifies the central processing unit 33 of the detection.

座標受信手段32は、中央演算手段33からの要求により、タッチパネルコントローラ2側の座標送信手段24に操作状態および押下座標取得要求を送信して操作状態および押下座標を受信する。   In response to a request from the central processing unit 33, the coordinate receiving unit 32 transmits an operation state and pressed coordinate acquisition request to the coordinate transmitting unit 24 on the touch panel controller 2 side, and receives the operation state and the pressed coordinate.

アイコン管理手段36は、表示手段4の画面上に配置されているアイコンを管理している。ここでのアイコンとは、ユーザがタッチパネル1上を押下することにより電気機器の電源状態を切り替える電源ボタンや、動作出力の強弱を切り替える強弱ボタンなどを指す。アイコン管理手段36では、アイコンの画像データと、アイコンに対する現在の操作状態(リリース、押下開始及び押下中)と、現在表示手段4に表示している位置を表す表示座標と、アイコンがクリック可またはドラッグ移動可であるかなどを表す動作属性とをアイコン毎に記憶している。アイコン管理手段36の内容は、中央演算手段33によりリアルタイムに更新される。   The icon management unit 36 manages icons arranged on the screen of the display unit 4. The icon here refers to a power button for switching the power state of the electric device when the user presses on the touch panel 1, a strength button for switching the strength of the operation output, and the like. In the icon management means 36, the image data of the icon, the current operation state (release, pressing start and pressing) of the icon, display coordinates indicating the position currently displayed on the display means 4, and the icon can be clicked. An operation attribute indicating whether drag movement is possible is stored for each icon. The contents of the icon management means 36 are updated in real time by the central processing means 33.

割込モード決定手段35は、中央演算手段33から受け付けた押下座標に配置されているアイコンをアイコン管理手段36から検索し、該アイコンの動作属性に基づいて割込モードを決定し、該割込モードをタッチパネルコントローラ2が有する割込モード設定手段25に出力する。   The interrupt mode determination unit 35 searches the icon management unit 36 for an icon arranged at the pressed coordinate received from the central processing unit 33, determines the interrupt mode based on the operation attribute of the icon, and the interrupt The mode is output to the interrupt mode setting means 25 included in the touch panel controller 2.

表示制御手段37は、中央演算手段33からの指示により表示手段4に背景画像などの画像を表示させる。また、中央演算手段33からの指示により、アイコン管理手段36が管理するアイコンの操作状態および動作属性に基づいて表示手段4に表示するアイコン画像を変更する。例えば、動作属性が「ドラッグ移動可」のアイコンの操作状態が「押下中」である場合、後述の図9(b)に示すように該アイコンの画像を影を付けて背景から浮いているように見えるように描画し、アイコンが「リリース」の時の画像(図9(a))と異なる画像を表示させる。影を付ける以外にも、上下左右とわずかに揺らして描画したり、アイコン画像の配色または濃淡または枠線の線種を変更して描画してもよい。   The display control unit 37 displays an image such as a background image on the display unit 4 according to an instruction from the central processing unit 33. Further, in accordance with an instruction from the central processing means 33, the icon image displayed on the display means 4 is changed based on the operation state and operation attribute of the icon managed by the icon management means 36. For example, when the operation state of the icon whose operation attribute is “drag moveable” is “pressing”, the icon image appears to float from the background with a shadow as shown in FIG. 9B described later. And an image different from the image when the icon is “release” (FIG. 9A) is displayed. In addition to adding a shadow, the image may be drawn by slightly swinging up and down, left and right, or may be drawn by changing the color scheme or shading of the icon image or the line type of the frame line.

表示手段4は、画像や文字を表示するディスプレイである。   The display means 4 is a display that displays images and characters.

図9は、表示手段に表示される表示画面の一例を示している。図9(a)はタッチパネルが押下されていない「リリース」状態を示す画面、図9(b)は押下されている「押下中」状態を示す図である。
表示画面には、複数のアイコン100(100a、100b)が表示されている。各アイコン100のうち、100aはドラッグ移動可のアイコンであり、100bはドラッグ不可(クリック可)のアイコンを示している。図9(b)では、「1F分電盤トリップ」のアイコンが押下されている状態を示しており、アイコンの左と下に黒い影が付き、ドラッグ移動可能であることを示している。
FIG. 9 shows an example of a display screen displayed on the display means. FIG. 9A is a screen showing a “release” state where the touch panel is not pressed, and FIG. 9B is a diagram showing a “pressing” state where the touch panel is pressed.
A plurality of icons 100 (100a, 100b) are displayed on the display screen. Among the icons 100, 100a is an icon that can be dragged, and 100b is an icon that cannot be dragged (clickable). FIG. 9B shows a state in which the “1F distribution board trip” icon is pressed, and black shadows are added to the left and bottom of the icon, indicating that dragging is possible.

通信手段5は、ネットワークを介して電気機器と接続しており、中央演算手段33の要求に応じて該電気機器と制御情報を授受する。   The communication unit 5 is connected to an electrical device via a network, and exchanges control information with the electrical device in response to a request from the central processing unit 33.

次に、本実施の形態2の表示操作装置におけるタッチパネルコントローラ2の動作について説明する。   Next, the operation of the touch panel controller 2 in the display operation device according to the second embodiment will be described.

図10は、実施の形態2の表示操作装置におけるタッチパネルコントローラ2の動作を示すフローチャートである。
タッチパネルコントローラ2は電源投入後、押下検出手段21によりタッチパネル1への押圧が検出されたかどうかを割込制御手段23でチェックしており(S31)、押下が検出されるまで待機する。すなわち、押下検出手段21は、タッチパネル1への押圧状況(押下開始、押下中)を検出し、その検出結果を操作状態検出手段26を介して割込制御手段23に出力しており、割込制御手段23は、押下検出手段21からの結果に応じてタッチパネル1への押圧が検出されたかどうかをチェックしている。ここで、タッチパネル1への押下があった場合、操作状態検出手段26は、押下検出手段21からの出力に基づいて、操作状態を「リリース」から「押下開始」に変更し、押圧開始されたことを割込制御手段23に出力する。
FIG. 10 is a flowchart showing the operation of the touch panel controller 2 in the display operation device of the second embodiment.
After the power is turned on, the touch panel controller 2 checks whether or not a press on the touch panel 1 is detected by the press detection means 21 using the interrupt control means 23 (S31), and waits until a press is detected. That is, the press detection unit 21 detects a pressing state (starting pressing or pressing) on the touch panel 1 and outputs the detection result to the interrupt control unit 23 via the operation state detection unit 26. The control means 23 checks whether or not a press on the touch panel 1 is detected according to the result from the press detection means 21. Here, when the touch panel 1 is pressed, the operation state detection unit 26 changes the operation state from “release” to “start pressing” based on the output from the press detection unit 21, and starts pressing. Is output to the interrupt control means 23.

割込制御手段23は、操作状態検出手段26の検出結果が「押下開始」と変更されたことを受け、タッチパネル1が押下されたと判断し、割込信号の出力を開始する(S32)。   The interrupt control means 23 receives the fact that the detection result of the operation state detection means 26 has been changed to “start pressing”, determines that the touch panel 1 has been pressed, and starts outputting an interrupt signal (S32).

そして、座標送信手段24は、割込制御手段23から割込信号をCPU3に出力したことによってCPU3の座標受信手段32から出力される、操作状態および押下座標の取得要求を座標送信手段24が待機し続け、該要求を受信すると(S33)、操作状態検出手段26が検出した操作状態および押下検出手段21が検出した押下座標をCPU3側の座標受信手段32に出力する(S34)。そして操作状態および押下座標の出力完了後、座標送信手段24は割込制御手段23に割込信号の出力停止を指示する。該指示を受けた割込制御手段23は割込信号を停止する(S35)。   Then, the coordinate transmission unit 24 waits for an operation state and a press coordinate acquisition request output from the coordinate reception unit 32 of the CPU 3 when the interrupt control unit 23 outputs an interrupt signal to the CPU 3. If the request is received (S33), the operation state detected by the operation state detection unit 26 and the pressed coordinates detected by the press detection unit 21 are output to the coordinate receiving unit 32 on the CPU 3 side (S34). Then, after completing the output of the operation state and the pressed coordinates, the coordinate transmission unit 24 instructs the interrupt control unit 23 to stop outputting the interrupt signal. Receiving the instruction, the interrupt control means 23 stops the interrupt signal (S35).

そして、割込制御手段23は、このときの割込モードを割込モード設定手段25を参照してチェックし(S36)、「詳細モード」の場合、現在のタッチパネル1の操作状態を操作状態検出手段26の検出結果に基づいてチェックする(S37)。現在のタッチパネル1の操作状態が「押下中」である場合、ステップS32に戻り、ステップS32〜S37の処理を、タッチパネル1の操作状態が「リリース」となるまで繰り返す。これにより、割込モードが「詳細モード」の場合には、タッチパネル1上を押下開始してからリリースするまでの間、押下検出手段21で検出した押下座標が逐次CPU3側に送信されることになる。   Then, the interrupt control unit 23 checks the interrupt mode at this time with reference to the interrupt mode setting unit 25 (S36), and in the case of the “detail mode”, the current operation state of the touch panel 1 is detected as the operation state. A check is made based on the detection result of the means 26 (S37). When the current operation state of the touch panel 1 is “pressing”, the process returns to step S32, and the processes of steps S32 to S37 are repeated until the operation state of the touch panel 1 becomes “release”. As a result, when the interrupt mode is “detail mode”, the pressed coordinates detected by the press detection means 21 are sequentially transmitted to the CPU 3 side from when the touch panel 1 is started to be released. Become.

一方、ステップS36で割込モードが「簡易モード」である場合には、最初のステップS31に戻る。これにより、タッチパネル1上が押下され、その押下座標に対応する割込モードが「簡易モード」であれば、一旦、ステップS34で押下座標をCPU3側に送信した後は、押下座標の送信は行わず、次の押下を待つ状態となる。   On the other hand, if the interrupt mode is “simple mode” in step S36, the process returns to the first step S31. As a result, if the touch panel 1 is pressed and the interrupt mode corresponding to the pressed coordinates is “simple mode”, the pressed coordinates are transmitted after the pressed coordinates are once transmitted to the CPU 3 in step S34. Without waiting for the next press.

次に、本実施の形態の表示操作装置におけるCPU3の動作について説明する。
図11は、実施の形態2の表示操作装置におけるCPU3の動作を示すフローチャートである。
Next, the operation of the CPU 3 in the display operation device of the present embodiment will be described.
FIG. 11 is a flowchart showing the operation of the CPU 3 in the display operation device according to the second embodiment.

CPU3の電源投入後、表示手段4への初期画面の表示、通信手段5の初期化、割込モードを「簡易モード」へ初期設定などといった初期化処理を行い(S41)、その後、メイン処理を起動する(S42)。   After the CPU 3 is turned on, initialization processing such as display of an initial screen on the display means 4, initialization of the communication means 5, and initial setting of the interrupt mode to the “simple mode” is performed (S41), and then the main processing is performed. Start up (S42).

中央演算手段33はメイン処理を実行しており、電気機器との制御情報との通信処理や、該制御情報に基づいて表示制御手段37を介して表示手段4への表示内容の更新処理などを繰り返し行っている。また、メイン処理ではタッチパネルコントローラ2からの操作状態および押下座標がバッファ33aに格納されていることを監視しており、バッファ33aに押下座標が格納されていない場合には(S43)、メイン処理を継続して行い(S44)、バッファ33aに押下座標が格納された場合には、押下座標処理を行う(S45)。   The central processing means 33 executes main processing, and performs communication processing with control information with the electric equipment, update processing of display contents on the display means 4 via the display control means 37 based on the control information, and the like. Repeatedly. In the main process, it is monitored that the operation state and the pressed coordinates from the touch panel controller 2 are stored in the buffer 33a. If the pressed coordinates are not stored in the buffer 33a (S43), the main process is performed. It continues (S44), and when the pressed coordinate is stored in the buffer 33a, the pressed coordinate process is performed (S45).

ところで、タッチパネルコントローラ2側でタッチパネル1への押圧が検出された場合、タッチパネルコントローラ2からCPU3に割込信号の出力が開始されるが(図10のステップS32)、CPU3は、その割込信号の出力開始を検知すると、割込処理を行う。   By the way, when the touch panel controller 2 detects that the touch panel 1 is pressed, the touch panel controller 2 starts outputting an interrupt signal to the CPU 3 (step S32 in FIG. 10). When the start of output is detected, interrupt processing is performed.

図12は、割込処理の流れを示すフローチャートである。
CPU3の割込受付手段34は、タッチパネルコントローラ2の割込制御手段23から出力される割込信号の出力開始を検知すると(S51)、検知した旨を中央演算手段33に通知し、中央演算手段33ではステップS42において実行中のメイン処理を中断し(S52)、座標取得処理を開始する(S53)。
FIG. 12 is a flowchart showing the flow of interrupt processing.
When the interrupt receiving means 34 of the CPU 3 detects the start of the output of the interrupt signal output from the interrupt control means 23 of the touch panel controller 2 (S51), it notifies the central processing means 33 of the detection, and the central processing means 33 In 33, the main process being executed in step S42 is interrupted (S52), and the coordinate acquisition process is started (S53).

図13は、図12の座標取得処理の流れを示すフローチャートである。
座標取得処理では、中央演算手段33が、座標受信手段32を介してタッチパネルコントローラ2に操作状態および押下座標を要求し(S53a)、該要求に応じてタッチパネルコントローラ2から送信されてくる押下座標を受信する(S53b)。そして、該押下座標を内部のバッファ33aに格納し(S53c)、座標取得処理を終了する。
FIG. 13 is a flowchart showing the flow of the coordinate acquisition process of FIG.
In the coordinate acquisition process, the central processing means 33 requests the touch panel controller 2 for the operation state and the pressed coordinates via the coordinate receiving means 32 (S53a), and the pressed coordinates transmitted from the touch panel controller 2 in response to the request are obtained. Receive (S53b). Then, the pressed coordinates are stored in the internal buffer 33a (S53c), and the coordinate acquisition process is terminated.

中央演算手段33は、座標取得処理を終了すると、割込終了処理すなわち座標取得処理前に中断した地点からメイン処理を再開する(S54)。   When completing the coordinate acquisition process, the central processing means 33 resumes the main process from the interrupted process, that is, the point interrupted before the coordinate acquisition process (S54).

なお、CPU3は、上述したようにバッファ33aに操作状態および押下座標が格納された場合、操作状態および押下座標に基づいた押下座標処理を行うが、以下、押下座標処理について説明する。   Note that, when the operation state and the pressed coordinates are stored in the buffer 33a as described above, the CPU 3 performs the pressed coordinate processing based on the operation state and the pressed coordinates. Hereinafter, the pressed coordinate processing will be described.

図14は、押下座標処理の流れを示すフローチャートである。
中央演算手段33は、バッファ33a内に格納された操作状態が「押下開始」の場合(S45a)、バッファ33aに格納された押下座標に配置されているアイコンに対応する処理を行う(S45b)。そして、中央演算手段33は、バッファ33a内に格納された押下座標を割込モード決定手段35に通知する。割込モード決定手段35では、中央演算手段33から受け付けた押下座標に配置されているアイコンをアイコン管理手段36から検索し、該アイコンの動作属性が「ドラッグ移動可」の場合、割込モードを「詳細モード」、それ以外の場合に「簡易モード」と決定し、タッチパネルコントローラ2が有する割込モード設定手段25に出力する(S45c)。
FIG. 14 is a flowchart showing the flow of the pressed coordinate processing.
When the operation state stored in the buffer 33a is “start pressing” (S45a), the central processing unit 33 performs a process corresponding to the icon arranged at the pressed coordinates stored in the buffer 33a (S45b). Then, the central processing means 33 notifies the interrupt mode determining means 35 of the pressed coordinates stored in the buffer 33a. The interrupt mode determination unit 35 searches the icon management unit 36 for an icon arranged at the pressed coordinate received from the central processing unit 33, and when the operation attribute of the icon is “drag moveable”, the interrupt mode is set. The “detailed mode” is determined, and in other cases, the “simple mode” is determined and output to the interrupt mode setting means 25 of the touch panel controller 2 (S45c).

また、中央演算手段33は、バッファ33a内の操作状態が「押下開始」の場合、バッファ33a内の押下座標が配置されているアイコンの操作状態を、アイコン管理手段36に指示して「押下中」に変更する(S45d)。この操作状態は、一定期間押下座標の受信がない場合または次に「押下開始」に対応する押下座標を受信した場合に「リリース」へと戻る。   When the operation state in the buffer 33a is “start pressing”, the central processing unit 33 instructs the icon management unit 36 to indicate the operation state of the icon in which the pressed coordinates in the buffer 33a are arranged. (S45d). This operation state returns to “Release” when no pressed coordinates are received for a certain period of time or when the pressed coordinates corresponding to “Start pressing” are received next.

一方、中央演算手段33は、バッファ33a内の操作状態が「押下中」の場合、バッファ33a内の押下座標が配置されているアイコンの「表示座標」を、アイコン管理手段36に指示して、バッファ33aに格納された押下座標に変更する(S45e)。また、中央演算手段33は、表示制御手段37に指示して、表示座標が変更されたアイコンを表示座標を変えて再描画させる(S45f)。中央演算手段33は、表示制御手段37に指示して、動作属性が「ドラッグ移動可」のアイコンの操作状態が「押下中」であるアイコンに対して、該アイコンの画像を影を付けて背景から浮いているように見えるように描画させる。   On the other hand, when the operation state in the buffer 33a is “pressing”, the central processing unit 33 instructs the icon management unit 36 to display the “display coordinates” of the icon where the pressed coordinates in the buffer 33a are arranged. The pressed coordinates stored in the buffer 33a are changed (S45e). The central processing means 33 instructs the display control means 37 to redraw the icon whose display coordinates have been changed by changing the display coordinates (S45f). The central processing means 33 instructs the display control means 37 to shadow the icon image for the icon whose operation attribute is “drag moveable” and whose operation state is “pressing”. To make it appear to float.

本実施の形態2によれば、タッチパネル1の押下座標に配置されたアイコンの動作属性に応じて割込モードを決定し、その割込モードに応じてCPUが割込処理の起動回数を制御するようにしているので、CPU主導で割込処理の起動制御が可能となり、押下座標の取得数優先かまたはCPU処理負荷の軽減優先かをタッチパネル上の押下操作に応じて柔軟に選択することが可能となる。具体的には、背景画像や決定ボタンなどドラッグ移動ができないアイコンがユーザにより押下された場合、割込モードを「簡易モード」に設定し、最初の押下時にのみ割込処理を起動することにより、座標取得処理の起動回数が抑制できる。したがってCPU処理負荷を抑制でき、座標取得処理が他の処理へ影響を及ぼすことを回避できる。   According to the second embodiment, the interrupt mode is determined according to the operation attribute of the icon arranged at the pressed coordinate of touch panel 1, and the CPU controls the number of times the interrupt process is activated according to the interrupt mode. As a result, it is possible to control the start of interrupt processing under the initiative of the CPU, and it is possible to select flexibly according to the pressing operation on the touch panel whether priority is given to the number of pressed coordinates or priority to reduce the CPU processing load. It becomes. Specifically, when an icon that cannot be dragged, such as a background image or a decision button, is pressed by the user, the interrupt mode is set to “simple mode”, and the interrupt process is started only at the first press, The number of times the coordinate acquisition process is activated can be suppressed. Therefore, the CPU processing load can be suppressed, and the influence of the coordinate acquisition process on other processes can be avoided.

一方、ドラッグ移動可能なアイコンがユーザにより押下された場合、割込モードを「詳細モード」に設定することにより、割込処理を優先して処理する。すなわち、押下座標を一定間隔で取得する。これにより、ドラッグ操作に追従してアイコンを移動させる描画が可能となる。   On the other hand, when an icon that can be dragged is pressed by the user, the interrupt mode is set to the “detail mode” to prioritize the interrupt process. That is, the pressed coordinates are acquired at regular intervals. Thereby, it is possible to perform drawing in which the icon is moved following the drag operation.

また、パソコンのようにマウスを備え、ユーザのマウス操作に追随してマウスカーソルが移動する一般の表示操作装置では、ドラッグ可能なアイコン画像の選択時にマウスカーソル画像を変更(例えば通常時は矢印で押下時は手の平)することにより、ユーザに選択中のアイコンがドラッグ移動可能であることを容易に認識させることができるが、本例のようにタッチパネルを有する表示操作装置ではマウスを備えていないことも多く、ユーザに選択中のアイコンがドラッグ移動可能であることを認識させることは困難であった。   Further, in a general display operation device that includes a mouse like a personal computer and moves the mouse cursor following the user's mouse operation, the mouse cursor image is changed when a draggable icon image is selected (for example, normally an arrow is used). The user can easily recognize that the selected icon can be dragged by pressing the palm of the hand when pressed, but the display operation device having the touch panel as in this example does not include a mouse. In many cases, it is difficult for the user to recognize that the selected icon can be dragged.

しかし、本実施の形態2では、各アイコン毎に操作状態と動作属性とを管理するようにしているので、クリック可のアイコンが単にクリックされた場合には、例えば手の平を表示し、ドラッグ移動可能なアイコンが押下中の状態にある場合には、そのアイコンに影を付ける、僅かに揺らすなど、通常時と異なる表現で描画することが可能となる。これにより、押下中のアイコンがドラッグ移動可能であることをユーザに認識させることが容易となる。   However, in the second embodiment, since the operation state and the operation attribute are managed for each icon, when a clickable icon is simply clicked, for example, a palm is displayed and can be dragged. When a simple icon is in a pressed state, it is possible to draw with a different expression from the normal time, such as adding a shadow to the icon or slightly shaking it. This makes it easy for the user to recognize that the pressed icon can be dragged.

実施の形態3.
実施の形態3の表示操作装置は、タッチパネルコントローラ2からCPU3に押下座標を送信する際の転送速度を、押下座標に配置されているアイコンの動作属性に応じてCPUが変更することにより、押下座標の取得間隔を調整するものである。
Embodiment 3 FIG.
In the display operation device according to the third embodiment, the CPU changes the transfer speed when transmitting the pressed coordinates from the touch panel controller 2 to the CPU 3 according to the operation attribute of the icon arranged at the pressed coordinates. This adjusts the acquisition interval.

図15は、本実施の形態3における表示操作装置のブロック図である。
図15における表示操作装置は、タッチパネル1と、押下検出手段21、割込制御手段23、座標送信手段24および操作状態検出手段26を備えるタッチパネルコントローラ2と、座標受信手段32、中央演算手段33、割込受付手段34、アイコン管理手段36、表示制御手段37、転送速度設定手段38および異常検出手段39を備えるCPU3と、表示手段4と、通信手段5とを備えている。
FIG. 15 is a block diagram of the display operation device according to the third embodiment.
15 includes a touch panel controller 2, a touch panel controller 2 including a press detection unit 21, an interrupt control unit 23, a coordinate transmission unit 24, and an operation state detection unit 26, a coordinate reception unit 32, a central calculation unit 33, The CPU 3 includes an interrupt reception unit 34, an icon management unit 36, a display control unit 37, a transfer rate setting unit 38, and an abnormality detection unit 39, a display unit 4, and a communication unit 5.

タッチパネル1は、ユーザの指およびペンなどの入力手段により押下操作を受け付けるインタフェースであり、表示手段4の画面上に形成されている。   The touch panel 1 is an interface that accepts a pressing operation by an input means such as a user's finger and pen, and is formed on the screen of the display means 4.

以下、まずタッチパネルコントローラ2の構成について説明する。
押下検出手段21は、前記タッチパネル1が押下されていることを検出し、押下されていることを操作状態検出手段26に出力するとともに、その押下座標を座標送信手段24からの要求に応じて座標送信手段24に出力する。
Hereinafter, the configuration of the touch panel controller 2 will be described first.
The press detection unit 21 detects that the touch panel 1 is pressed, outputs the pressed state to the operation state detection unit 26, and coordinates the pressed coordinates in response to a request from the coordinate transmission unit 24. Output to the transmission means 24.

操作状態検出手段26は、押下検出手段21の検出結果に基づいてタッチパネル1に対するユーザの操作状態を検出する。操作状態には「リリース」、「押下開始」、「押下中」があり、それぞれタッチパネル1が押圧されていない状態、押圧を開始した状態、押圧が解除されずに押圧が続いている状態を表す。   The operation state detection unit 26 detects the operation state of the user with respect to the touch panel 1 based on the detection result of the press detection unit 21. The operation states include “release”, “pressing start”, and “pressing”, and each represents a state where the touch panel 1 is not pressed, a state where pressing is started, and a state where pressing continues without being released. .

割込制御手段23は、押下検出手段21がタッチパネル1へ押下操作を検出した場合に割込信号をCPU3へ出力する。また、割込制御手段23は、割込信号の出力開始後、座標送信手段24からの割込信号出力停止の指示を受信すると、割込信号の出力を停止する。   The interrupt control unit 23 outputs an interrupt signal to the CPU 3 when the press detection unit 21 detects a press operation on the touch panel 1. Further, the interrupt control means 23 stops outputting the interrupt signal when receiving an instruction to stop the interrupt signal output from the coordinate transmitting means 24 after the output of the interrupt signal is started.

座標送信手段24は、CPU3が有する座標受信手段32とクロック同期型シリアル通信方式によりデータを授受する。クロック同期型シリアル通信方式とは、座標送信手段24と座標受信手段32とをクロック信号線、送信信号線および受信信号線の3本の信号線で接続し、座標受信手段32がクロック信号線上にて発信するクロックのタイミングで、送信信号線にCPU3からタッチパネルコントローラ2へとコマンドデータを送信し、受信信号線にタッチパネルコントローラ2からCPU3へと押下座標を1ビットずつ出力する方式である。座標送信手段24は、座標受信手段32から押下座標を要求するコマンドデータを受け付け後、押下検出手段21から押下座標を取得し、上記クロックのタイミングで該押下座標を受信信号線に出力する。また、押下座標の出力完了後、割込制御手段23に割込信号の出力停止を指示する。   The coordinate transmission unit 24 exchanges data with the coordinate reception unit 32 of the CPU 3 by a clock synchronous serial communication method. In the clock synchronous serial communication system, the coordinate transmission unit 24 and the coordinate reception unit 32 are connected by three signal lines of a clock signal line, a transmission signal line, and a reception signal line, and the coordinate reception unit 32 is placed on the clock signal line. The command data is transmitted from the CPU 3 to the touch panel controller 2 on the transmission signal line at the timing of the transmitted clock, and the pressed coordinates are output bit by bit from the touch panel controller 2 to the CPU 3 on the reception signal line. After receiving the command data requesting the pressed coordinates from the coordinate receiving means 32, the coordinate transmitting means 24 acquires the pressed coordinates from the pressing detection means 21, and outputs the pressed coordinates to the reception signal line at the timing of the clock. Further, after the output of the pressed coordinates is completed, the interrupt control means 23 is instructed to stop the output of the interrupt signal.

次に、CPU3の構成について説明する。
中央演算手段33では、本表示操作装置でのソフトウェア処理を行う。ソフトウェア処理は、通常実行されているメイン処理と外部からのイベント発生時に実行する割込処理とに分類される。メイン処理では、座標受信手段32が受信した押下座標に基づいて、表示制御手段37を介して表示手段4が表示する表示内容の更新処理、該押下座標の転送速度設定手段38への通知、アイコン管理手段36が管理するアイコンの操作状態およびアイコンが配置されている座標の更新、電気機器との制御情報の授受を通信手段5を介して行う通信処理などを行う。割込処理は、タッチパネルコントローラ2から割込受付手段34を介して割込信号を受信した際に起動する処理であり、座標受信手段32を介してタッチパネルコントローラ2の座標送信手段24から操作状態および押下座標を取得する処理を行う。
Next, the configuration of the CPU 3 will be described.
The central processing means 33 performs software processing in the display operation device. Software processing is classified into main processing that is normally executed and interrupt processing that is executed when an external event occurs. In the main processing, based on the pressed coordinates received by the coordinate receiving means 32, the display content displayed on the display means 4 is updated via the display control means 37, the transfer coordinates setting means 38 notifies the pressed coordinates, and the icon. An operation state of the icons managed by the management means 36 and the coordinates at which the icons are arranged are updated, and communication processing for performing control information exchange with the electric device via the communication means 5 is performed. The interrupt process is a process that is started when an interrupt signal is received from the touch panel controller 2 via the interrupt reception unit 34, and the operation state and the operation state from the coordinate transmission unit 24 of the touch panel controller 2 via the coordinate reception unit 32. A process for acquiring the pressed coordinates is performed.

また、中央演算手段33は、メイン処理実行中に割込受付手段34が割込信号を検出した場合、該メイン処理を中断し、割込処理を開始する。そして、割込処理の終了後に、中断していたメイン処理を再開する。   Further, when the interrupt receiving means 34 detects an interrupt signal during execution of the main process, the central processing means 33 interrupts the main process and starts the interrupt process. Then, after the interruption process is completed, the interrupted main process is resumed.

割込受付手段34は、タッチパネルコントローラ2が有する割込制御手段23が出力する割込信号と、座標受信手段32が押下座標の受信完了時に出力する後述の受信完了割込信号とを検知し、検知した旨を中央演算手段33に通知する。   The interrupt receiving unit 34 detects an interrupt signal output from the interrupt control unit 23 of the touch panel controller 2 and a reception completion interrupt signal described later output when the coordinate receiving unit 32 completes reception of the pressed coordinate, The central processing means 33 is notified of the detection.

座標受信手段32は、中央演算手段33からの要求により、タッチパネルコントローラ2側の座標送信手段24に操作状態および押下座標取得要求を送信して操作状態および押下座標を受信する。この受信動作では、タッチパネルコントローラ2が有する座標送信手段24に対する押下座標要求コマンドの出力、座標送信手段24が出力する押下座標の受信、コマンドおよび押下座標の出力タイミングとなるクロック信号線上へのクロック発信を行う。該クロック発信する周波数は後述の転送速度設定手段38が設定する転送速度に従う。   In response to a request from the central processing unit 33, the coordinate receiving unit 32 transmits an operation state and pressed coordinate acquisition request to the coordinate transmitting unit 24 on the touch panel controller 2 side, and receives the operation state and the pressed coordinate. In this reception operation, the output of the pressed coordinate request command to the coordinate transmission means 24 of the touch panel controller 2, the reception of the pressed coordinates output from the coordinate transmission means 24, and the clock transmission on the clock signal line that is the output timing of the command and the pressed coordinates. I do. The frequency at which the clock is transmitted follows the transfer rate set by transfer rate setting means 38 described later.

アイコン管理手段36は、表示手段4の画面上に配置されているアイコンを管理している。ここでのアイコンとは、ユーザがタッチパネル上を押下することにより電気機器の電源状態を切り替える電源ボタンや、動作出力の強弱を切り替える強弱ボタンなどを指す。アイコン管理手段36では、アイコンの画像データと、アイコンに対する現在の操作状態(リリース、押下開始及び押下中)と、現在表示手段4に表示している位置を表す表示座標と、アイコンがクリック可またはドラッグ移動可であるかなどを表す動作属性とをアイコン毎に記憶している。アイコン管理手段36の内容は、中央演算手段33によりリアルタイムに更新される。   The icon management unit 36 manages icons arranged on the screen of the display unit 4. The icon here refers to a power button for switching the power state of the electric device when the user presses on the touch panel, a strength button for switching the strength of the operation output, and the like. In the icon management means 36, the image data of the icon, the current operation state (release, pressing start and pressing) of the icon, display coordinates indicating the position currently displayed on the display means 4, and the icon can be clicked. An operation attribute indicating whether drag movement is possible is stored for each icon. The contents of the icon management means 36 are updated in real time by the central processing means 33.

転送速度設定手段38は、中央演算手段33から受け付けた押下座標に配置されているアイコンをアイコン管理手段36から検索し、該アイコンの動作属性に基づいてタッチパネルコントローラ2から操作状態および押下座標を受信する際の転送速度、具体的には座標受信手段32がクロック信号線上にクロック発信する周波数を設定する。この転送速度は、動作属性が「ドラッグ移動可」の場合、「クリック可」の場合に比べて速く設定されるようになっている。   The transfer speed setting unit 38 searches the icon management unit 36 for an icon arranged at the pressed coordinate received from the central processing unit 33, and receives the operation state and the pressed coordinate from the touch panel controller 2 based on the operation attribute of the icon. The transfer speed at the time of the transmission, specifically, the frequency at which the coordinate receiving means 32 transmits the clock on the clock signal line is set. This transfer speed is set faster when the operation attribute is “drag moveable” than when it is “clickable”.

異常検出手段39は、最近一日の間に収集した押下座標を内部に履歴として保持し、その履歴から押下座標の平均座標を計算し、該平均座標と本表示操作装置出荷時に設定した基準座標との差分を求め、該差分が閾値以上の場合にタッチパネルにハードウェア異常が発生したことを検出する。これは、平均座標が基準座標と離れている場合、正しく押下座標を検出できなくなっていると捉え、ハードウェア異常の発生と判断するものである。   The anomaly detection means 39 stores the pressed coordinates collected during the last day as a history, calculates the average coordinates of the pressed coordinates from the history, and the average coordinates and the reference coordinates set at the time of shipment of the display operation device When the difference is equal to or greater than the threshold, it is detected that a hardware abnormality has occurred on the touch panel. In this case, when the average coordinate is away from the reference coordinate, it is determined that the pressed coordinate cannot be detected correctly, and it is determined that a hardware abnormality has occurred.

表示制御手段37は、中央演算手段33からの指示により表示手段4に背景画像などの画像を表示させる。また、中央演算手段33からの指示により、アイコン管理手段36が管理するアイコンの操作状態および動作属性に基づいて表示手段4に表示するアイコン画像を変更する。例えば、動作属性がドラッグ移動可のアイコンの操作状態が「押下中」である場合、図9に示したように該アイコンの画像を影を付けて背景から浮いているように見えるように描画し、アイコンが未選択時の時と異なる画像を表示させる。影を付ける以外にも、上下左右とわずかに揺らして描画したり、アイコン画像の配色または濃淡または枠線の線種を変更して描画してもよい。また、異常検出手段39がタッチパネル1の異常を検出した場合、表示手段4に設けた異常通知LED(図示せず)を点滅させる。   The display control unit 37 displays an image such as a background image on the display unit 4 according to an instruction from the central processing unit 33. Further, in accordance with an instruction from the central processing means 33, the icon image displayed on the display means 4 is changed based on the operation state and operation attribute of the icon managed by the icon management means 36. For example, when the operation state of the icon whose movement attribute is draggable is “pressing”, the icon image is drawn so as to appear to float from the background with a shadow as shown in FIG. , An image different from that when no icon is selected is displayed. In addition to adding a shadow, the image may be drawn by slightly swinging up and down, left and right, or may be drawn by changing the color scheme or shading of the icon image or the line type of the frame line. Further, when the abnormality detection means 39 detects an abnormality of the touch panel 1, an abnormality notification LED (not shown) provided on the display means 4 is blinked.

表示手段4は、画像や文字を表示するディスプレイである。またタッチパネルの異常をユーザに通知する異常通知LED(図示せず)を備える。   The display means 4 is a display that displays images and characters. In addition, an abnormality notification LED (not shown) for notifying the user of an abnormality of the touch panel is provided.

通信手段5は、ネットワークを介して電気機器と接続しており、中央演算手段33の要求に応じて該電気機器と制御情報を授受する。   The communication unit 5 is connected to an electrical device via a network, and exchanges control information with the electrical device in response to a request from the central processing unit 33.

次に、本実施の形態の表示操作装置におけるタッチパネルコントローラ2の動作について説明する。   Next, the operation of the touch panel controller 2 in the display operation device of the present embodiment will be described.

図16は、実施の形態3の表示操作装置におけるタッチパネルコントローラ2の動作を示すフローチャートである。
タッチパネルコントローラ2は電源投入後、押下検出手段21によりタッチパネル1への押圧が検出されたかどうかを割込制御手段23でチェックしており(S61)、押下が検出されるまで待機する。すなわち、押下検出手段21は、タッチパネル1への押圧状況を検出しており、その検出結果を操作状態検出手段26を介して割込制御手段23に出力しており、割込制御手段23は、押下検出手段21からの結果に応じてタッチパネル1への押圧が検出されたかどうかをチェックしている。ここで、タッチパネル1への押圧があった場合、操作状態検出手段26は、押下検出手段21からの出力に基づいて、操作状態を「リリース」から「押下開始」に変更し、押圧開始されたことを割込制御手段23に出力する。
FIG. 16 is a flowchart illustrating the operation of the touch panel controller 2 in the display operation device according to the third embodiment.
After the power is turned on, the touch panel controller 2 checks whether or not a press on the touch panel 1 is detected by the press detection means 21 using the interrupt control means 23 (S61), and waits until a press is detected. That is, the press detection unit 21 detects the pressing state on the touch panel 1 and outputs the detection result to the interrupt control unit 23 via the operation state detection unit 26. The interrupt control unit 23 It is checked whether or not a press on the touch panel 1 is detected according to the result from the press detection means 21. Here, when the touch panel 1 is pressed, the operation state detection unit 26 changes the operation state from “release” to “start pressing” based on the output from the press detection unit 21, and starts pressing. Is output to the interrupt control means 23.

割込制御手段23は、操作状態検出手段26の検出結果が「押下開始」と変更されたことを受け、タッチパネル1が押下されたと判断し、割込信号の出力を開始する(S62)。   The interrupt control means 23 receives that the detection result of the operation state detection means 26 has been changed to “start pressing”, determines that the touch panel 1 has been pressed, and starts outputting an interrupt signal (S62).

そして、座標送信手段24は、割込制御手段23から割込信号をCPU3側に出力したことによってCPU3の座標受信手段32から出力される操作状態および押下座標の取得要求を待機し続け、該要求を受信すると(S63)、押下検出手段21が検出した押下座標を座標受信手段32が発信するクロックに従い受信信号線に出力する(S64)。そして操作状態および押下座標の出力完了後、座標送信手段24は割込制御手段23に割込信号の出力停止を指示する。該指示を受けた割込制御手段23は割込信号を停止する(S65)。   Then, the coordinate transmission means 24 continues to wait for the operation state and pressed coordinate acquisition request output from the coordinate receiving means 32 of the CPU 3 by outputting the interrupt signal from the interrupt control means 23 to the CPU 3 side. Is received (S63), the pressed coordinates detected by the pressing detection means 21 are output to the reception signal line according to the clock transmitted by the coordinate receiving means 32 (S64). Then, after completing the output of the operation state and the pressed coordinates, the coordinate transmission unit 24 instructs the interrupt control unit 23 to stop outputting the interrupt signal. Receiving the instruction, the interrupt control means 23 stops the interrupt signal (S65).

次に、本実施の形態の表示操作装置におけるCPU3の動作について説明する。
図17は、実施の形態3の表示操作装置におけるCPU3の動作を示すフローチャートである。
Next, the operation of the CPU 3 in the display operation device of the present embodiment will be described.
FIG. 17 is a flowchart illustrating the operation of the CPU 3 in the display operation device according to the third embodiment.

CPU3の電源投入後、表示手段4への初期画面の表示、通信手段5の初期化、転送速度を1MHzへ初期設定などといった初期化処理を行い(S71)、その後、メイン処理を起動する(S72)。   After the CPU 3 is turned on, initialization processing such as display of an initial screen on the display means 4, initialization of the communication means 5, and initial setting of the transfer rate to 1 MHz is performed (S71), and then the main process is started (S72). ).

中央演算手段33はメイン処理を実行しており、電気機器との制御情報との通信処理や、該制御情報に基づいて表示制御手段37を介して表示手段4への表示内容の更新処理などを繰り返し行っている。また、メイン処理ではタッチパネルコントローラ2からの操作状態および押下座標がバッファ33aに格納されていることを監視しており、バッファ33aに押下座標が格納されていない場合には(S73)、メイン処理を継続して行い(S74)、バッファ33aに押下座標が格納された場合には、押下座標処理を行う(S75)。   The central processing means 33 executes main processing, and performs communication processing with control information with the electric equipment, update processing of display contents on the display means 4 via the display control means 37 based on the control information, and the like. Repeatedly. In the main process, it is monitored that the operation state and the pressed coordinates from the touch panel controller 2 are stored in the buffer 33a. If the pressed coordinates are not stored in the buffer 33a (S73), the main process is performed. It continues (S74), and when the pressed coordinate is stored in the buffer 33a, the pressed coordinate process is performed (S75).

ところで、タッチパネルコントローラ2側でタッチパネル1への押圧が検出された場合、タッチパネルコントローラ2からCPU3に割込信号の出力が開始されるが(図16のステップS62)、CPU3は、その割込信号の出力開始を検知すると、割込処理を行う。   By the way, when the touch panel controller 2 detects that the touch panel 1 is pressed, the touch panel controller 2 starts outputting an interrupt signal to the CPU 3 (Step S62 in FIG. 16). When the start of output is detected, interrupt processing is performed.

図18は、割込処理の流れを示すフローチャートである。
CPU3の割込受付手段34は、タッチパネルコントローラ2の割込制御手段23から出力される割込信号の出力開始を検知すると(S81)、検知した旨を中央演算手段33に通知し、中央演算手段33ではステップS72において実行中のメイン処理を中断し(S82)、座標取得処理を開始する(S83)。
FIG. 18 is a flowchart showing the flow of interrupt processing.
When the interrupt receiving means 34 of the CPU 3 detects the start of the output of the interrupt signal output from the interrupt control means 23 of the touch panel controller 2 (S81), it notifies the central processing means 33 of the detection, and the central processing means 33 In 33, the main process being executed in step S72 is interrupted (S82), and the coordinate acquisition process is started (S83).

図19は、図18の座標取得処理の流れを示すフローチャートである。
座標取得処理では、中央演算手段33が、座標受信手段32を介してタッチパネルコントローラ2に操作状態および押下座標を要求する(S83a)。そして、ステップS82で中断した地点からメイン処理を再開する(S83b)。このとき、中央演算手段33ではメイン処理が実行されているが、座標受信手段32では、設定された転送速度に従いタッチパネルコントローラ2から操作状態および押下座標を取得する処理を行う(S83c)。そして、操作状態および押下座標の受信を完了すると、座標受信手段32は、受信完了割込信号を割込受付手段34に出力する。割込受付手段34は、受信完了割込信号を検知すると、検知した旨を中央演算手段33に通知する。
FIG. 19 is a flowchart showing the flow of the coordinate acquisition process of FIG.
In the coordinate acquisition process, the central processing unit 33 requests the operation state and the pressed coordinates from the touch panel controller 2 via the coordinate receiving unit 32 (S83a). Then, the main process is resumed from the point interrupted in step S82 (S83b). At this time, the central processing unit 33 executes the main process, but the coordinate receiving unit 32 performs a process of acquiring the operation state and the pressed coordinates from the touch panel controller 2 according to the set transfer speed (S83c). When the reception of the operation state and the pressed coordinates is completed, the coordinate receiving unit 32 outputs a reception completion interrupt signal to the interrupt receiving unit 34. When detecting the reception completion interrupt signal, the interrupt receiving unit 34 notifies the central processing unit 33 of the detection.

中央演算手段33は、割込受付手段34からの受信完了割込信号を受信すると、実行中のメイン処理を中断し(S83d)、座標受信手段32が受信した操作状態および押下座標をバッファ33aに格納し(S83e)、座標取得処理を終了する。   When the central processing unit 33 receives the reception completion interrupt signal from the interrupt receiving unit 34, the central processing unit 33 interrupts the main process being executed (S83d), and stores the operation state and pressed coordinates received by the coordinate receiving unit 32 in the buffer 33a. Store (S83e) and end the coordinate acquisition process.

中央演算手段33は、割込処理を終了すると、割込終了処理すなわちステップS83dで中断した地点からメイン処理を再開する(S84)。   When the interrupt processing is finished, the central processing means 33 resumes the main processing from the interrupt end processing, that is, the point interrupted in step S83d (S84).

なお、CPU3は、上述したようにバッファ33aに操作状態および押下座標が格納された場合、操作状態および押下座標に基づいた押下座標処理(図17のステップS75)を行うが、以下、押下座標処理について説明する。   When the operation state and the pressed coordinates are stored in the buffer 33a as described above, the CPU 3 performs a pressed coordinate process (step S75 in FIG. 17) based on the operated state and the pressed coordinates. Will be described.

図20は、押下座標処理の流れを示すフローチャートである。
中央演算手段33は、まず、異常検出手段39に該押下座標を通知する。異常検出手段39では、中央演算手段33から通知される押下座標を履歴として蓄積しており、現在から1日前までに取得した押下座標の平均値を計算し、該平均値と本入力操作装置の出荷時に設定された基本座標値の差分が閾値以上か否かを判断する(S75a)。閾値以上である場合、タッチパネル1にハードウェア異常が発生したと検出し、表示制御手段37を介して表示手段4の異常検出LEDを点灯させる(S75b)。
FIG. 20 is a flowchart showing the flow of the pressed coordinate processing.
The central processing means 33 first notifies the abnormality detection means 39 of the pressed coordinates. The abnormality detection unit 39 accumulates the pressed coordinates notified from the central processing unit 33 as a history, calculates an average value of the pressed coordinates acquired from the present day to the previous day, and calculates the average value and the input operation device. It is determined whether or not the difference between the basic coordinate values set at the time of shipment is greater than or equal to a threshold value (S75a). If it is equal to or greater than the threshold value, it is detected that a hardware abnormality has occurred in the touch panel 1, and the abnormality detection LED of the display means 4 is turned on via the display control means 37 (S75b).

次に、中央演算手段33は、バッファ33a内の操作状態が「押下中」の場合(S75c)、続いて、バッファ33a内の押下座標の位置に表示されている当該アイコンの動作属性が「ドラッグ移動可」か否かをチェックし(S75d)、「ドラッグ移動可」であれば、該アイコンのアイコン管理手段36内の「表示座標」をバッファ33aに格納された押下座標に変更し(S75e)、表示制御手段37に該アイコンを新しい表示座標の位置に再描画させる(S75f)。   Next, when the operation state in the buffer 33a is “depressing” (S75c), the central processing unit 33 subsequently sets the operation attribute of the icon displayed at the position of the pressed coordinate in the buffer 33a to “drag. It is checked whether or not “movable” (S75d). If “drag movement is possible”, the “display coordinates” in the icon management means 36 of the icon is changed to the pressed coordinates stored in the buffer 33a (S75e). Then, the display control means 37 is caused to redraw the icon at the new display coordinate position (S75f).

一方、中央演算手段33は、バッファ33a内の操作状態が「押下開始」の場合、続いて、バッファ33a内の押下座標の位置に表示されている当該アイコンの動作属性が「ドラッグ移動可」か否かをチェックし(S75g)、「ドラッグ移動可」であれば、当該アイコンの操作状態をアイコン管理手段36に指示して「押下中」に変更する(S75h)。また、中央演算手段33は、表示制御手段37に指示して、当該アイコンの画像を影を付けて背景から浮いているように見えるように描画させる(S75i)。更に、バッファ33a内の押下座標を転送速度設定手段38に出力する。   On the other hand, when the operation state in the buffer 33a is “start pressing”, the central processing means 33 subsequently determines whether the operation attribute of the icon displayed at the pressed coordinate position in the buffer 33a is “drag moveable”. If it is “drag moveable”, the operation state of the icon is instructed to the icon management means 36 and changed to “pressing” (S75h). Further, the central processing means 33 instructs the display control means 37 to draw the icon image so as to appear as if it is floating from the background with a shadow (S75i). Further, the pressed coordinates in the buffer 33a are output to the transfer speed setting means 38.

転送速度設定手段38は、中央演算手段33からの押下座標を受け付けると、その押下座標に配置されているアイコンをアイコン管理手段36から検索し、該アイコンの動作属性(ここでは「ドラッグ移動可」)に応じた転送速度を、例えば「100KHz」に設定する(S75j)。すなわち、タッチパネル1で押下されたアイコンが「ドラッグ移動可」のアイコンの場合には、CPU3は他の処理に優先して割込処理(座標取得処理)を行うようにしている。これにより、ドラッグ操作に伴って変化する押下座標の位置を短時間間隔で取得することが可能となり、アイコン画像をドラッグ操作に伴って移動させる表示が可能となる。   When the transfer speed setting unit 38 receives the pressed coordinate from the central processing unit 33, the transfer speed setting unit 38 searches the icon management unit 36 for an icon arranged at the pressed coordinate, and the operation attribute of the icon (here, “drag movement is possible”). ) Is set to, for example, “100 KHz” (S75j). That is, when the icon pressed on the touch panel 1 is an “drag moveable” icon, the CPU 3 performs interrupt processing (coordinate acquisition processing) in preference to other processing. As a result, the position of the pressed coordinates that change with the drag operation can be acquired at short time intervals, and the icon image can be displayed to move with the drag operation.

一方、ステップS75gで動作属性が「クリック可」の場合も、上記と同様に中央演算手段33は、バッファ33a内の押下座標を転送速度設定手段38に出力する。転送速度設定手段38は、中央演算手段33からの押下座標を受け付け、ここでは当該アイコンの動作属性が「クリック可」であることから、クリック可に応じた転送速度、例えば「10KHz」に設定する(S75k)。すなわち、クリック可の場合には、ドラッグ移動可の場合に比べて短時間間隔での押下座標の取得が不要であることから、転送速度を遅く設定する。これにより、CPU3は押下座標の取得処理の回数を少なくでき、CPU3側では、割込処理よりも他のメイン処理を優先して処理することができる。   On the other hand, when the operation attribute is “clickable” in step S75g, the central processing means 33 outputs the pressed coordinates in the buffer 33a to the transfer speed setting means 38 as described above. The transfer speed setting means 38 receives the pressed coordinates from the central processing means 33, and here, since the operation attribute of the icon is “clickable”, the transfer speed is set to a transfer speed corresponding to the clickable, for example, “10 KHz”. (S75k). That is, when the click is possible, it is not necessary to acquire the pressed coordinates at short time intervals as compared with the case where the drag movement is possible. Thereby, CPU3 can reduce the frequency | count of the acquisition process of a pressing coordinate, and can process a main process other than an interruption process with priority on CPU3 side.

本実施の形態3によれば、タッチパネルコントローラ2からCPU3に押下座標を送信する際の転送速度を、押下座標に配置されているアイコンの動作属性に応じてCPU3が設定するようにしているので、CPU主導で割込処理の起動制御が可能となる。また、転送速度を制御することにより、割込処理の起動回数を制御でき、押下座標の取得数優先かまたはCPU処理負荷の軽減優先かをタッチパネル上の押下操作に応じて柔軟に選択することが可能となる。具体的には、動作属性がクリック可のアイコンがユーザにより押下された場合、転送速度を遅く設定することにより、割込処理の起動回数が抑制できる。したがってCPU処理負荷を抑制でき、座標取得処理が他の処理へ影響を及ぼすことを回避できる。   According to the third embodiment, the CPU 3 sets the transfer speed when transmitting the pressed coordinates from the touch panel controller 2 to the CPU 3 according to the operation attribute of the icon arranged at the pressed coordinates. The activation control of the interrupt processing can be led by the CPU. In addition, by controlling the transfer speed, the number of interrupt processing activations can be controlled, and whether to obtain priority for the number of pressed coordinates or to reduce the CPU processing load can be flexibly selected according to the pressing operation on the touch panel. It becomes possible. Specifically, when an icon whose operation attribute is clickable is pressed by the user, the number of interrupt processing activations can be suppressed by setting the transfer speed slower. Therefore, the CPU processing load can be suppressed, and the influence of the coordinate acquisition process on other processes can be avoided.

一方、ドラッグ移動可能なアイコンがユーザにより押下された場合、転送速度を速く設定することにより、割込処理の起動回数を多くし、割込処理を優先して処理することができる。これにより、ドラッグ操作に追従してアイコンを移動させる描画が可能となる。   On the other hand, when a draggable icon is pressed by the user, by setting the transfer speed faster, the number of times the interrupt process is started can be increased and the interrupt process can be preferentially processed. Thereby, it is possible to perform drawing in which the icon is moved following the drag operation.

また、パソコンのようにマウスを備え、ユーザのマウス操作に追随してマウスカーソルが移動する一般の表示操作装置では、ドラッグ可能なアイコン画像の選択時にマウスカーソル画像を変更(例えば通常時は矢印で選択時は手の平)することにより、ユーザに選択中のアイコンがドラッグ移動可能であることを容易に認識させることができるが、本例のようにタッチパネルを有する表示操作装置ではマウスを備えていないことも多く、ユーザに選択中のアイコンがドラッグ移動可能であることを認識させることは困難であった。   Further, in a general display operation device that includes a mouse like a personal computer and moves the mouse cursor following the user's mouse operation, the mouse cursor image is changed when a draggable icon image is selected (for example, normally an arrow is used). The user can easily recognize that the currently selected icon can be moved by dragging, but the display operation device having the touch panel as in this example does not include a mouse. In many cases, it is difficult for the user to recognize that the selected icon can be dragged.

しかし、本実施の形態3では、各アイコン毎に操作状態と動作属性とを管理するようにしているので、クリック可のアイコンが単にクリックされた場合には、例えば手の平を表示し、ドラッグ移動可能なアイコンが押下中の状態にある場合には、そのアイコンに影を付ける、僅かに揺らすなど、通常時と異なる表現で描画することが可能となる。これにより、押下中のアイコンがドラッグ移動可能であることをユーザに認識させることが容易となる。   However, in the third embodiment, since the operation state and the operation attribute are managed for each icon, when a clickable icon is simply clicked, for example, a palm is displayed and can be dragged. When a simple icon is in a pressed state, it is possible to draw with a different expression from the normal time, such as adding a shadow to the icon or slightly shaking it. This makes it easy for the user to recognize that the pressed icon can be dragged.

また、押下座標の履歴を収集することにより、タッチパネル1のハードウェア異常を検出でき、ユーザにすばやく表示操作装置の修理または交換を促すことが可能となる。   Further, by collecting the history of the pressed coordinates, it is possible to detect a hardware abnormality of the touch panel 1 and prompt the user to quickly repair or replace the display operation device.

本発明は上述した実施の形態に限定されるものではなく、例えば以下のような変形が可能である。
1.実施の形態1において、割込間隔決定手段31による割込間隔の決定を、入力方式に応じて決定していたのに代えて、押下検出手段21で検出された押下座標の位置に配置されているアイコンの動作属性に応じて決定する。
2.実施の形態2において、割込モード決定手段35による割込モードの決定を、押下検出手段21で検出された押下座標の位置に配置されているアイコンの動作属性に応じて決定していたのに代えて、入力方式に応じて決定する。
3.実施の形態3において、転送速度設定手段38による転送速度の設定を、押下検出手段21で検出された押下座標の位置に配置されているアイコンの動作属性に応じて決定していたのに代えて、入力方式に応じて決定する。
4.実施の形態3における異常検出手段39を、実施の形態1の構成および実施の形態2の構成にも適用する。
The present invention is not limited to the above-described embodiment, and for example, the following modifications are possible.
1. In the first embodiment, the determination of the interrupt interval by the interrupt interval determination unit 31 is performed according to the input method, and is arranged at the position of the pressed coordinate detected by the press detection unit 21. It is determined according to the operation attribute of the icon.
2. In the second embodiment, the determination of the interrupt mode by the interrupt mode determination unit 35 is determined according to the operation attribute of the icon arranged at the pressed coordinate position detected by the press detection unit 21. Instead, it is determined according to the input method.
3. In the third embodiment, instead of having determined the transfer speed setting by the transfer speed setting means 38 according to the operation attribute of the icon arranged at the pressed coordinate position detected by the press detection means 21. Determined according to the input method.
4). The abnormality detection means 39 in the third embodiment is also applied to the configuration of the first embodiment and the configuration of the second embodiment.

本発明は、家電機器を制御するホームコントローラや設備機器を制御する集中コントローラなどのタッチパネルを有する表示操作装置に適用して好適である。   The present invention is suitably applied to a display operation device having a touch panel such as a home controller that controls home appliances or a centralized controller that controls equipment.

本実施の形態1における表示操作装置のブロック図である。It is a block diagram of the display operation device in the first embodiment. 実施の形態1の表示操作装置におけるタッチパネルコントローラ2の動作を示すフローチャートである。3 is a flowchart illustrating an operation of a touch panel controller 2 in the display operation device according to the first embodiment. 実施の形態1の表示操作装置におけるCPU3の動作を示すフローチャートである。3 is a flowchart illustrating the operation of a CPU 3 in the display operation device according to the first embodiment. 割込処理の流れを示すフローチャートである。It is a flowchart which shows the flow of an interruption process. 図4の割込処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the interruption process of FIG. 押下座標処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a pressing coordinate process. 文字入力受付画面の一例を示す図である。It is a figure which shows an example of a character input reception screen. 本実施の形態2における表示操作装置のブロック図である。It is a block diagram of the display operation device in the second embodiment. 表示手段に表示される表示画面の一例を示す図である。It is a figure which shows an example of the display screen displayed on a display means. 実施の形態2の表示操作装置におけるタッチパネルコントローラ2の動作を示すフローチャートである。10 is a flowchart illustrating an operation of the touch panel controller 2 in the display operation device according to the second embodiment. 実施の形態2の表示操作装置におけるCPU3の動作を示すフローチャートである。10 is a flowchart showing the operation of the CPU 3 in the display operation device according to the second embodiment. 割込処理の流れを示すフローチャートである。It is a flowchart which shows the flow of an interruption process. 図12の割込処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the interruption process of FIG. 押下座標処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a pressing coordinate process. 本実施の形態3における表示操作装置のブロック図である。FIG. 10 is a block diagram of a display operation device in a third embodiment. 実施の形態3の表示操作装置におけるタッチパネルコントローラ2の動作を示すフローチャートである。10 is a flowchart illustrating an operation of the touch panel controller 2 in the display operation device according to the third embodiment. 実施の形態3の表示操作装置におけるCPU3の動作を示すフローチャートである。10 is a flowchart illustrating the operation of a CPU 3 in the display operation device according to the third embodiment. 割込処理の流れを示すフローチャートである。It is a flowchart which shows the flow of an interruption process. 図18の座標取得処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the coordinate acquisition process of FIG. 押下座標処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a pressing coordinate process.

符号の説明Explanation of symbols

1 タッチパネル、2 タッチパネルコントローラ、4 表示手段、5 通信手段、
21 押下検出手段、22 割込間隔設定手段、23 割込制御手段、24 座標送信手段、25 割込モード設定手段、26 操作状態検出手段、31 割込間隔決定手段、
32 座標受信手段、33 中央演算手段、33a バッファ、34 割込受付手段、
35 割込モード決定手段、36 アイコン管理手段、37 表示制御手段、38 転送速度設定手段、39 異常検出手段、40 入力方式記憶手段。
1 touch panel, 2 touch panel controller, 4 display means, 5 communication means,
21 Press detection means, 22 Interrupt interval setting means, 23 Interrupt control means, 24 Coordinate transmission means, 25 Interrupt mode setting means, 26 Operation state detection means, 31 Interrupt interval determination means,
32 coordinate receiving means, 33 central processing means, 33a buffer, 34 interrupt receiving means,
35 interrupt mode determination means, 36 icon management means, 37 display control means, 38 transfer speed setting means, 39 abnormality detection means, 40 input method storage means.

Claims (18)

タッチパネルへの押下操作の押下座標に応じた処理を行う表示操作装置であって、
画面を表示する表示手段と、
該表示手段の前記画面上に形成されたタッチパネルと、
該タッチパネルへの押下座標を検出する押下検出手段と、
前記押下検出手段で検出された押下座標に応じた処理および装置全体の制御を行うと共に、前記押下座標に応じて前記タッチパネルに対するユーザの入力方式を切り替える処理手段と、
割込信号を前記処理手段に出力する割込制御手段とを備え、
前記処理手段は、前記押下検出手段で検出された押下座標に応じた前記入力方式に基づいて割込間隔を決定し、前記割込制御手段に通知する割込間隔決定手段を有し、前記通知に応じて前記割込制御手段から前記割込間隔で出力されてくる割込信号を受信すると、前記押下検出手段から前記押下座標を取得することを特徴とする表示操作装置。
A display operation device that performs processing according to the pressed coordinates of a pressing operation on a touch panel,
Display means for displaying a screen;
A touch panel formed on the screen of the display means;
A press detection means for detecting the press coordinates on the touch panel;
Processing means for performing processing and control of the entire apparatus according to the pressed coordinates detected by the pressing detection means, and switching a user input method to the touch panel according to the pressed coordinates ;
Interrupt control means for outputting an interrupt signal to the processing means,
The processing means has an interrupt interval determination means for determining an interrupt interval based on the input method corresponding to the pressed coordinates detected by the press detection means and notifying the interrupt control means, the notification When the interrupt signal output at the interrupt interval is received from the interrupt control unit according to the display, the pressed coordinate is acquired from the press detection unit.
前記入力方式として、ペン入力モードと選択入力モードとを有し、前記割込間隔決定手段は、前記ペン入力方式に対応する入力領域が押下されたときの割込間隔を、前記選択入力モードに対応する入力領域が押下されたときの割込間隔に比べて短くし、前記ペン入力モード時には、前記選択入力モード時に比べて短時間間隔で前記押下検出手段から前記押下座標を取得するようにしたことを特徴とする請求項記載の表示操作装置。 The input method includes a pen input mode and a selection input mode, and the interrupt interval determination means sets the interrupt interval when the input area corresponding to the pen input method is pressed to the selection input mode. It is shorter than the interrupt interval when the corresponding input area is pressed, and in the pen input mode, the pressed coordinates are acquired from the press detection means at a shorter interval than in the selection input mode. The display operation device according to claim 1 . 前記タッチパネルに表示される前記画面には複数のアイコンが表示され、前記処理手段は、前記画面に表示されている前記複数のアイコンそれぞれの動作属性を管理しており、前記割込間隔決定手段は、前記押下検出手段で検出された押下座標に配置されているアイコンの動作属性に基づいて前記割込間隔を決定することを特徴とする請求項1記載の表示操作装置。   A plurality of icons are displayed on the screen displayed on the touch panel, the processing means manages operation attributes of each of the plurality of icons displayed on the screen, and the interrupt interval determination means includes 2. The display operation device according to claim 1, wherein the interrupt interval is determined based on an operation attribute of an icon arranged at a pressed coordinate detected by the pressed detection means. 前記動作属性として、クリック可とドラッグ移動可とを有し、前記処理手段の前記割込間隔決定手段は、前記ドラッグ移動可のアイコンが押下されたときの割込間隔を前記クリック可のアイコンが押下されたときの割込間隔に比べて短くし、前記ドラッグ移動可のアイコン押下時には、前記クリック可のアイコン押下時に比べて短時間間隔で前記押下検出手段から前記押下座標を取得するようにしたことを特徴とする請求項記載の表示操作装置。 The operation attributes include clickable and draggable, and the interrupt interval determining unit of the processing unit determines the interrupt interval when the draggable icon is pressed by the clickable icon. It is shorter than the interrupt interval when pressed, and when the draggable icon is pressed, the pressed coordinates are acquired from the press detection means at a shorter interval than when the clickable icon is pressed. The display operation device according to claim 3 . タッチパネルへの押下操作の押下座標に応じた処理を行う表示操作装置であって、
画面を表示する表示手段と、
該表示手段の前記画面上に形成されたタッチパネルと、
該タッチパネルが押下されていることを検出するとともに、その押下座標を検出する押下検出手段と、
該押下検出手段の検出結果に基づき押下操作の操作状態をリアルタイムに検出する操作状態検出手段と、
前記押下検出手段で検出された押下座標に応じた処理および装置全体の制御を行う処理手段と、
割込信号を前記処理手段に出力する割込制御手段とを備え、
前記処理手段は、前記押下検出手段で検出された押下座標に基づいて割込モードを決定し、前記割込制御手段に通知する割込モード決定手段を備え、
前記割込制御手段は、前記決定された割込モードと前記操作状態検出手段の検出結果との組み合わせに応じた出力条件に従って割込信号を出力し、
前記処理手段は、前記割込信号を受信すると、前記押下検出手段から前記押下座標を取得することを特徴とする表示操作装置。
A display operation device that performs processing according to the pressed coordinates of a pressing operation on a touch panel,
Display means for displaying a screen;
A touch panel formed on the screen of the display means;
A press detection means for detecting that the touch panel is pressed and detecting the press coordinates;
An operation state detecting means for detecting an operation state of the pressing operation in real time based on a detection result of the press detecting means;
Processing means for performing processing according to the pressed coordinates detected by the pressing detection means and control of the entire apparatus;
Interrupt control means for outputting an interrupt signal to the processing means,
The processing means includes an interrupt mode determination means for determining an interrupt mode based on the pressed coordinates detected by the press detection means and notifying the interrupt control means,
The interrupt control means outputs an interrupt signal according to an output condition according to a combination of the determined interrupt mode and the detection result of the operation state detection means,
When the processing means receives the interrupt signal, the processing means acquires the pressed coordinates from the pressing detection means.
前記割込モードとして、詳細モードと簡易モードとを有し、前記操作状態として、リリース、押下開始および押下中を有し、前記割込制御手段は、前記操作状態がリリースから押下開始に変更になった場合に割込信号を一旦出力し、その後は、前記割込モードが簡易モードの場合には割込信号を出力せず、前記割込モードが詳細モードで且つ前記操作状態が押下中の場合には、前記操作状態がリリースとなるまで割込信号を一定間隔で出力することを特徴とする請求項記載の表示操作装置。 The interrupt mode includes a detailed mode and a simple mode, and the operation state includes release, pressing start, and pressing in progress, and the interrupt control means changes the operation state from release to pressing start. once outputs an interrupt signal if it becomes, thereafter, the outputs no interrupt signal if the interrupt mode is the simple mode, the interrupt mode and the operational state is in pressed in verbose mode 6. The display operation device according to claim 5 , wherein interrupt signals are output at regular intervals until the operation state is released. 前記タッチパネルに表示される前記画面には複数のアイコンが表示され、前記処理手段は、前記画面に表示されている前記複数のアイコンそれぞれの動作属性を管理しており、前記割込モード決定手段は、前記押下検出手段で検出された押下座標に配置されているアイコンの動作属性に基づいて前記割込モードを決定することを特徴とする請求項又は請求項記載の表示操作装置。 A plurality of icons are displayed on the screen displayed on the touch panel, the processing means manages operation attributes of each of the plurality of icons displayed on the screen, and the interrupt mode determination means includes The display operation device according to claim 5 or 6, wherein the interrupt mode is determined based on an operation attribute of an icon arranged at a press coordinate detected by the press detection means. 前記アイコンの動作属性として、クリック可とドラッグ移動可とを有し、前記割込モード決定手段は、前記ドラッグ移動可のアイコンが押下されたときの割込モードを前記詳細モードに決定し、前記クリック可のアイコンが押下されたときの割込モードを前記簡易モードに決定することを特徴とする請求項記載の表示操作装置。 The operation attribute of the icon includes clickable and draggable, and the interrupt mode determining means determines the interrupt mode when the draggable icon is pressed as the detailed mode, and The display operation device according to claim 7 , wherein an interrupt mode when a clickable icon is pressed is determined as the simple mode. 前記処理手段は、前記押下座標に応じて前記タッチパネルに対するユーザの入力方式を切り替え、前記割込モード決定手段は、前記入力方式に基づいて前記割込モードを決定することを特徴とする請求項又は請求項記載の表示操作装置。 Said processing means switches the input mode of the user to the touch panel in accordance with the pressed coordinates, the interrupt mode determining means, claim and determines the interrupt mode based on the input method 5 Or the display operation apparatus of Claim 6 . 前記入力方式として、ペン入力モードと選択入力モードとを有し、前記割込モード決定手段は、前記ペン入力方式に対応する入力領域が押下された場合に前記詳細モードに決定し、前記選択入力モードに対応する入力領域が押下された場合に前記簡易モードに決定することを特徴とする請求項記載の表示操作装置。 The input method has a pen input mode and a selection input mode, and the interrupt mode determination means determines the detailed mode when the input area corresponding to the pen input method is pressed, and the selection input The display operation device according to claim 9 , wherein the simple mode is determined when an input area corresponding to the mode is pressed. タッチパネルへの押下操作の押下座標に応じた処理を行う表示操作装置であって、
画面を表示する表示手段と、
該表示手段の前記画面上に形成されたタッチパネルと、
該タッチパネルが押下されていることを検出するとともに、その押下座標を検出する押下検出手段と、
前記押下検出手段で検出された押下座標を送信する座標送信手段と、
前記押下検出手段で検出された押下座標に応じた処理および装置全体の制御を行う処理手段と、
前記押下検出手段で前記タッチパネルの押下が検出されると割込信号を前記処理手段に出力する割込制御手段とを備え、
前記処理手段は、前記押下検出手段で検出された押下座標に応じて転送速度を決定する転送速度決定手段を備え、前記割込信号を受信すると、前記座標送信手段から前記決定された転送速度で出力されてくる押下座標を取得することを特徴とする表示操作装置。
A display operation device that performs processing according to the pressed coordinates of a pressing operation on a touch panel,
Display means for displaying a screen;
A touch panel formed on the screen of the display means;
A press detection means for detecting that the touch panel is pressed and detecting the press coordinates;
Coordinate transmission means for transmitting the pressed coordinates detected by the press detection means;
Processing means for performing processing according to the pressed coordinates detected by the pressing detection means and control of the entire apparatus;
An interruption control means for outputting an interruption signal to the processing means when the depression of the touch panel is detected by the depression detection means,
The processing unit includes a transfer rate determining unit that determines a transfer rate according to the pressed coordinates detected by the press detecting unit, and receives the interrupt signal at the determined transfer rate from the coordinate transmitting unit. A display operation device characterized in that the output pressed coordinates are acquired.
前記タッチパネルに表示される前記画面には複数のアイコンが表示され、前記処理手段は、前記画面に表示されている前記複数のアイコンそれぞれの動作属性を管理しており、前記転送速度決定手段は、前記押下検出手段で検出された押下座標に配置されているアイコンの動作属性に従い、転送速度を決定することを特徴とする請求項11記載の表示操作装置。 A plurality of icons are displayed on the screen displayed on the touch panel, the processing means manages operation attributes of each of the plurality of icons displayed on the screen, and the transfer rate determining means includes: 12. The display operation device according to claim 11 , wherein a transfer speed is determined according to an operation attribute of an icon arranged at a pressed coordinate detected by the pressed detection unit. 前記アイコンの動作属性として、クリック可とドラッグ移動可とを有し、前記処理手段の前記転送速度決定手段は、前記ドラッグ移動可のアイコンが押下されたときの転送速度を前記クリック可のアイコンが押下されたときの転送速度に比べて速くし、前記ドラッグ移動可のアイコン押下時には、前記クリック可のアイコン押下時に比べて短時間間隔で前記押下検出手段から前記押下座標を取得するようにしたことを特徴とする請求項12記載の表示操作装置。 The operation attributes of the icon include clickable and draggable, and the transfer speed determining means of the processing means determines the transfer speed when the draggable icon is pressed by the clickable icon. It is faster than the transfer speed when it is pressed, and when the draggable icon is pressed, the pressed coordinates are acquired from the press detection means at a shorter interval than when the clickable icon is pressed. The display operation device according to claim 12 . 前記処理手段は、前記押下座標に応じて前記タッチパネルに対するユーザの入力方式を切り替え、前記転送速度決定手段は、前記入力方式に基づいて前記転送速度を決定することを特徴とする請求項11記載の表示操作装置。 12. The processing unit according to claim 11 , wherein the processing unit switches a user input method for the touch panel according to the pressed coordinates, and the transfer rate determining unit determines the transfer rate based on the input method. Display operation device. 前記入力方式として、ペン入力モードと選択入力モードとを有し、前記転送速度決定手段は、前記ペン入力方式に対応する入力領域が押下されたときの転送速度を、前記選択入力モードに対応する入力領域が押下されたときの転送速度に比べて速くし、前記ペン入力モード時には、前記選択入力モード時に比べて短時間間隔で前記押下検出手段から前記押下座標を取得するようにしたことを特徴とする請求項14記載の表示操作装置。 The input method includes a pen input mode and a selection input mode, and the transfer rate determination means corresponds to the transfer rate when the input area corresponding to the pen input method is pressed corresponding to the selection input mode. The transfer speed is higher than the transfer speed when the input area is pressed, and the pressed coordinates are acquired from the press detection means at a shorter time interval in the pen input mode than in the selection input mode. The display operation device according to claim 14 . 前記処理手段は、前記表示手段に表示するアイコンに対して操作状態と動作属性とを管理しており、操作状態が押下中且つ動作属性がドラッグ移動可能であるアイコンは、影付き表示するまたは僅かに揺らして表示する、枠線の線種を変更する、アイコンの配色を変更する、アイコンの濃淡を変更する、いずれかの方法により、アイコン画像を変更して前記表示手段に表示することを特徴とする請求項3、4、7、8、12、13の何れかに記載の表示操作装置。 The processing unit manages an operation state and an operation attribute for an icon displayed on the display unit, and an icon whose operation state is pressed and the operation attribute is draggable is displayed with a shadow or a slight amount. The icon image is changed and displayed on the display means by any of the following methods: changing the line type of the frame line, changing the color scheme of the icon, or changing the shade of the icon. The display operation device according to any one of claims 3, 4 , 7 , 8 , 12 , and 13 . 前記処理手段は、前記押下検出手段から取得した前記押下座標を収集し、収集した押下座標から平均座標を求め、該平均座標と基準座標との差分が所定の閾値以上である場合にタッチパネルにハード異常が発生したことを検出する異常検出手段を備えることを特徴とする請求項1乃至請求項16の何れかに記載の表示操作装置。 The processing means collects the pressed coordinates acquired from the pressed detection means, obtains average coordinates from the collected pressed coordinates, and if the difference between the average coordinates and the reference coordinates is equal to or greater than a predetermined threshold, The display operation device according to any one of claims 1 to 16 , further comprising abnormality detection means for detecting that an abnormality has occurred. 複数の電気機器とネットワークを介して通信するための通信手段を備え、前記画面には前記複数の電気機器のそれぞれに対応したアイコンが表示されており、前記処理手段は、前記画面上のアイコンが押下された場合、該アイコンに対応する電気機器に制御情報を送信し、前記電気機器の動作を制御するものであることを特徴とする請求項1乃至請求項17の何れかに記載の表示操作装置。 Communication means for communicating with a plurality of electrical devices via a network, icons corresponding to each of the plurality of electrical devices are displayed on the screen, and the processing means includes icons on the screen. If it is pressed, to transmit control information to the electrical device corresponding to the icon display operation according to any one of claims 1 to 17, characterized in that for controlling the operation of the electrical device apparatus.
JP2008115297A 2008-04-25 2008-04-25 Display operation device Expired - Fee Related JP4717098B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008115297A JP4717098B2 (en) 2008-04-25 2008-04-25 Display operation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008115297A JP4717098B2 (en) 2008-04-25 2008-04-25 Display operation device

Publications (2)

Publication Number Publication Date
JP2009265976A JP2009265976A (en) 2009-11-12
JP4717098B2 true JP4717098B2 (en) 2011-07-06

Family

ID=41391746

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008115297A Expired - Fee Related JP4717098B2 (en) 2008-04-25 2008-04-25 Display operation device

Country Status (1)

Country Link
JP (1) JP4717098B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011160057A (en) * 2010-01-29 2011-08-18 Kyocera Mita Corp Image forming apparatus
JP2012230622A (en) 2011-04-27 2012-11-22 Kyocera Document Solutions Inc Information processor
CN102841786B (en) * 2011-06-24 2015-07-29 国基电子(上海)有限公司 The method of electronic equipment and setting process priority thereof
JP5998761B2 (en) * 2012-09-03 2016-09-28 株式会社リコー Electronic equipment
KR102301652B1 (en) * 2013-03-04 2021-09-13 삼성전자 주식회사 Method for operating page and electronic device thereof
KR102188097B1 (en) * 2013-03-04 2020-12-07 삼성전자주식회사 Method for operating page and electronic device thereof
KR102323440B1 (en) * 2020-12-01 2021-11-08 삼성전자 주식회사 Method for operating page and electronic device thereof

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06149461A (en) * 1992-11-09 1994-05-27 Matsushita Electric Ind Co Ltd Pen input device

Also Published As

Publication number Publication date
JP2009265976A (en) 2009-11-12

Similar Documents

Publication Publication Date Title
JP4717098B2 (en) Display operation device
CN102819352B (en) The method and apparatus of control terminal
US8140971B2 (en) Dynamic and intelligent hover assistance
EP2738661A2 (en) Method for displaying applications and electronic device thereof
US20120304199A1 (en) Information processing apparatus, information processing method, and computer program
CN103294366A (en) Screen unlocking method and electronic equipment
KR101105735B1 (en) Electronic device, computer-implemented system, and application display control method therefor
JP5472118B2 (en) Operation support method, operation support system, operation support apparatus, and operation support program
WO2014175438A1 (en) Control system, control device, control method, and program
US20180018084A1 (en) Display device, display method and computer-readable recording medium
CN109491562A (en) A kind of interface display method and terminal device of voice assistant application program
CN105955573A (en) Mobile terminal application switching method and system
CN110389704A (en) One-handed performance method, mobile terminal and the storage medium of mobile terminal
CN103389871A (en) Control method for electronic equipment and electronic equipment
CN104423629A (en) Electronic equipment and data processing method
CN106445378A (en) Display control method and device of touch menu, and touch display equipment
CN107092433B (en) Touch control method and device of touch control all-in-one machine
CN105549828A (en) Electronic device with touch display screen and information processing method thereof
CN103176723A (en) Processing method and processing device for touch response
CN107728898B (en) Information processing method and mobile terminal
CN112637653B (en) Television touch remote control method and system
US20110066978A1 (en) Electronic apparatus and touch menu control method thereof
US10133346B2 (en) Gaze based prediction device and method
CN108717349B (en) Terminal bright screen control method and device, terminal and storage medium
CN108132721B (en) Method for generating drag gesture, touch device and portable electronic equipment

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110301

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110329

R150 Certificate of patent or registration of utility model

Ref document number: 4717098

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140408

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees