JP6418191B2 - Display input device, information processing device - Google Patents

Display input device, information processing device Download PDF

Info

Publication number
JP6418191B2
JP6418191B2 JP2016063123A JP2016063123A JP6418191B2 JP 6418191 B2 JP6418191 B2 JP 6418191B2 JP 2016063123 A JP2016063123 A JP 2016063123A JP 2016063123 A JP2016063123 A JP 2016063123A JP 6418191 B2 JP6418191 B2 JP 6418191B2
Authority
JP
Japan
Prior art keywords
display
display surface
unit
input device
covering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016063123A
Other languages
Japanese (ja)
Other versions
JP2017183772A (en
Inventor
覚 羽山
覚 羽山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Priority to JP2016063123A priority Critical patent/JP6418191B2/en
Publication of JP2017183772A publication Critical patent/JP2017183772A/en
Application granted granted Critical
Publication of JP6418191B2 publication Critical patent/JP6418191B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、表示入力装置、及び表示入力装置を備える情報処理装置に関する。   The present invention relates to a display input device and an information processing device including the display input device.

プリンターなどの情報処理装置は、表示部の表示面への操作を検出可能なタッチパネルのような操作検出部を備えることがある。例えば、操作検出部は、表示面における静電容量の変化に基づいて、表示面へのユーザーの操作を検出する。   An information processing apparatus such as a printer may include an operation detection unit such as a touch panel that can detect an operation on a display surface of a display unit. For example, the operation detection unit detects a user operation on the display surface based on a change in capacitance on the display surface.

また、表示面上に操作無効領域を設定可能な情報処理装置が従来技術として知られている(特許文献1参照)。この従来技術によれば、ユーザーは操作無効領域に指を置きつつ他の指で表示面を操作することが可能となる。そのため、表示面を操作するユーザーの操作負担が軽減される。   Further, an information processing apparatus capable of setting an operation invalid area on a display surface is known as a conventional technique (see Patent Document 1). According to this prior art, the user can operate the display surface with another finger while placing the finger in the operation invalid area. Therefore, the operation burden on the user who operates the display surface is reduced.

国際公開第2010/090033号International Publication No. 2010/090033

しかしながら、上述の従来技術は、表示面の複数カ所への同時操作を検出できない、所謂シングルタッチの操作検出部を備える情報処理装置には適用することができない。   However, the above-described conventional technology cannot be applied to an information processing apparatus including a so-called single touch operation detection unit that cannot detect simultaneous operations at a plurality of positions on the display surface.

本発明の目的は、表示面の複数カ所への同時操作を検出できない操作検出部を備える場合であっても、表示面を操作するユーザーの操作負担を軽減することが可能な表示入力装置、及び情報処理装置を提供することにある。   An object of the present invention is to provide a display input device capable of reducing an operation burden on a user who operates a display surface, even when including an operation detection unit that cannot detect simultaneous operations on a plurality of locations on the display surface, and It is to provide an information processing apparatus.

本発明の一の局面に係る表示入力装置は、表示部と、操作検出部と、被覆部とを備える。前記表示部は、表示面を有する。前記操作検出部は、前記表示面における静電容量の変化に基づいて前記表示面へのユーザーの操作を検出する。前記被覆部は、前記表示面の内部側へ延伸した第1位置と前記表示面の外周縁から外側へ退避した第2位置との間で移動可能に設けられ、前記第1位置において前記表示面の一部を覆う。   A display input device according to one aspect of the present invention includes a display unit, an operation detection unit, and a covering unit. The display unit has a display surface. The operation detection unit detects a user operation on the display surface based on a change in capacitance on the display surface. The covering portion is provided so as to be movable between a first position extended to the inner side of the display surface and a second position retracted outward from an outer peripheral edge of the display surface, and the display surface at the first position. Cover a part of.

本発明の他の局面に係る情報処理装置は、表示入力装置を備える。前記表示入力装置は、表示部と、操作検出部と、被覆部とを備える。前記表示部は、表示面を有する。前記操作検出部は、前記表示面における静電容量の変化に基づいて前記表示面へのユーザーの操作を検出する。前記被覆部は、前記表示面の内部側へ延伸した第1位置と前記表示面の外周縁から外側へ退避した第2位置との間で移動可能に設けられ、前記第1位置において前記表示面の一部を覆う。   An information processing apparatus according to another aspect of the present invention includes a display input device. The display input device includes a display unit, an operation detection unit, and a covering unit. The display unit has a display surface. The operation detection unit detects a user operation on the display surface based on a change in capacitance on the display surface. The covering portion is provided so as to be movable between a first position extended to the inner side of the display surface and a second position retracted outward from an outer peripheral edge of the display surface, and the display surface at the first position. Cover a part of.

本発明によれば、表示面の複数カ所への同時操作を検出できない操作検出部を備える場合であっても、表示面を操作するユーザーの操作負担を軽減することが可能である。   ADVANTAGE OF THE INVENTION According to this invention, even if it is a case where the operation detection part which cannot detect simultaneous operation to several places of a display surface is provided, it is possible to reduce the operation burden of the user who operates a display surface.

図1は、本発明の実施形態に係る画像処理装置の構成を示す図である。FIG. 1 is a diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention. 図2は、本発明の実施形態に係る画像処理装置のシステム構成を示すブロック図である。FIG. 2 is a block diagram showing a system configuration of the image processing apparatus according to the embodiment of the present invention. 図3は、本発明の実施形態に係る画像処理装置の操作表示部の構成を示す図である。FIG. 3 is a diagram illustrating a configuration of the operation display unit of the image processing apparatus according to the embodiment of the present invention. 図4は、本発明の実施形態に係る画像処理装置の操作表示部の構成を示す図である。FIG. 4 is a diagram illustrating a configuration of the operation display unit of the image processing apparatus according to the embodiment of the present invention. 図5は、本発明の実施形態に係る画像処理装置の操作表示部の構成を示す図である。FIG. 5 is a diagram illustrating a configuration of the operation display unit of the image processing apparatus according to the embodiment of the present invention. 図6は、本発明の実施形態に係る画像処理装置の操作表示部の構成を示す図である。FIG. 6 is a diagram showing the configuration of the operation display unit of the image processing apparatus according to the embodiment of the present invention. 図7は、本発明の実施形態に係る画像処理装置で実行される操作検出処理の一例を示すフローチャートである。FIG. 7 is a flowchart illustrating an example of the operation detection process executed by the image processing apparatus according to the embodiment of the present invention. 図8は、本発明の他の実施形態に係る画像処理装置の操作表示部の構成を示す図である。FIG. 8 is a diagram illustrating a configuration of an operation display unit of an image processing apparatus according to another embodiment of the present invention.

以下、添付図面を参照しながら、本発明の実施形態について説明する。なお、以下の実施形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定するものではない。   Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. The following embodiment is an example embodying the present invention, and does not limit the technical scope of the present invention.

[画像処理装置10の概略構成]
まず、図1及び図2を参照しつつ、本発明の実施形態に係る画像処理装置10の概略構成について説明する。ここで、図1は画像処理装置10の構成を示す断面模式図である。なお、以下においては、図1における紙面上下方向を画像処理装置10の上下方向D1、紙面左右方向を画像処理装置10の前後方向D2、紙面奥行方向を画像処理装置10の左右方向D3と定義して説明を行う。
[Schematic Configuration of Image Processing Apparatus 10]
First, a schematic configuration of an image processing apparatus 10 according to an embodiment of the present invention will be described with reference to FIGS. 1 and 2. Here, FIG. 1 is a schematic cross-sectional view showing the configuration of the image processing apparatus 10. In the following, the vertical direction of the paper in FIG. 1 is defined as the vertical direction D1 of the image processing apparatus 10, the horizontal direction of the paper is defined as the front-rear direction D2 of the image processing apparatus 10, and the depth direction of the paper is defined as the horizontal direction D3 of the image processing apparatus 10. To explain.

画像処理装置10は、原稿から画像データを読み取るスキャン機能、及び画像データに基づいて画像を形成するプリント機能と共に、ファクシミリ機能、及びコピー機能などの複数の機能を有する複合機である。ここに、画像処理装置10が、本発明における情報処理装置の一例である。なお、本発明は、スキャナー装置、プリンター装置、ファクシミリ装置、コピー機、パーソナルコンピューター、カーナビゲーション装置などの情報処理装置に適用可能である。   The image processing apparatus 10 is a multifunction machine having a plurality of functions such as a facsimile function and a copy function, as well as a scan function for reading image data from a document and a print function for forming an image based on the image data. Here, the image processing apparatus 10 is an example of an information processing apparatus according to the present invention. The present invention is applicable to information processing apparatuses such as a scanner apparatus, a printer apparatus, a facsimile apparatus, a copier, a personal computer, and a car navigation apparatus.

図1及び図2に示されるように、画像処理装置10は、ADF(自動原稿搬送装置)1、画像読取部2、画像形成部3、給紙部4、制御部5、及び操作表示部6を備える。   As shown in FIGS. 1 and 2, the image processing apparatus 10 includes an ADF (automatic document feeder) 1, an image reading unit 2, an image forming unit 3, a paper feeding unit 4, a control unit 5, and an operation display unit 6. Is provided.

ADF1は、原稿セット部、複数の搬送ローラー、原稿押さえ、及び排紙部を備え、画像読取部2によって読み取られる原稿を搬送する。画像読取部2は、原稿台、光源、複数のミラー、光学レンズ、及びCCDを備え、原稿から画像データを読み取ることが可能である。   The ADF 1 includes a document setting unit, a plurality of conveyance rollers, a document pressing unit, and a paper discharge unit, and conveys a document read by the image reading unit 2. The image reading unit 2 includes a document table, a light source, a plurality of mirrors, an optical lens, and a CCD, and can read image data from the document.

画像形成部3は、画像読取部2で読み取られた画像データ又は外部の情報処理装置から入力された画像データに基づいて、電子写真方式でカラー又はモノクロの画像を形成可能である。具体的に、画像形成部3は、C(シアン)、M(マゼンタ)、Y(イエロー)、及びK(ブラック)に対応する複数の画像形成ユニット、光走査装置、中間転写ベルト、二次転写ローラー、定着装置、及び排紙トレイを備える。給紙部4は、画像形成部3にシートを供給する。画像形成部3では、給紙部4から供給されるシートにカラー又はモノクロの画像が形成されて、画像形成後のシートが前記排紙トレイに排出される。なお、画像形成部3は、インクジェット方式などの他の画像形成方式によって画像を形成するものであってもよい。   The image forming unit 3 can form a color or monochrome image by electrophotography based on image data read by the image reading unit 2 or image data input from an external information processing apparatus. Specifically, the image forming unit 3 includes a plurality of image forming units corresponding to C (cyan), M (magenta), Y (yellow), and K (black), an optical scanning device, an intermediate transfer belt, and a secondary transfer. A roller, a fixing device, and a paper discharge tray are provided. The sheet feeding unit 4 supplies sheets to the image forming unit 3. In the image forming unit 3, a color or monochrome image is formed on the sheet supplied from the paper feeding unit 4, and the sheet after image formation is discharged to the paper discharge tray. Note that the image forming unit 3 may form an image by another image forming method such as an ink jet method.

制御部5は、不図示のCPU、ROM、RAM、及びEEPROM(登録商標)などの制御機器を備える。前記CPUは、各種の演算処理を実行するプロセッサーである。前記ROMは、前記CPUに各種の処理を実行させるための制御プログラムなどの情報が予め記憶される不揮発性の記憶部である。前記RAMは揮発性の記憶部であり、前記EEPROMは不揮発性の記憶部である。前記RAM及び前記EEPROMは、前記CPUが実行する各種の処理の一時記憶メモリー(作業領域)として使用される。制御部5では、前記CPUにより前記ROMに予め記憶された各種の制御プログラムが実行される。これにより、画像処理装置10が制御部5により統括的に制御される。なお、制御部5は、集積回路(ASIC)などの電子回路で構成されたものであってもよく、画像処理装置10を統括的に制御するメイン制御部とは別に設けられた制御部であってもよい。   The control unit 5 includes control devices such as a CPU, ROM, RAM, and EEPROM (registered trademark) (not shown). The CPU is a processor that executes various arithmetic processes. The ROM is a non-volatile storage unit in which information such as a control program for causing the CPU to execute various processes is stored in advance. The RAM is a volatile storage unit, and the EEPROM is a non-volatile storage unit. The RAM and the EEPROM are used as a temporary storage memory (working area) for various processes executed by the CPU. In the control unit 5, various control programs stored in advance in the ROM are executed by the CPU. As a result, the image processing apparatus 10 is comprehensively controlled by the control unit 5. The control unit 5 may be an electronic circuit such as an integrated circuit (ASIC), and is a control unit provided separately from the main control unit that comprehensively controls the image processing apparatus 10. May be.

[操作表示部6の構成]
次に、図1〜図6を参照しつつ、操作表示部6の構成について説明する。ここで、図3は操作表示部6の構成を示す平面模式図である。また、図4は図3におけるIV−IV矢視断面図である。また、図5は被覆部63が表示面611の内部側へ延伸された状態を示す図である。また、図6は、図5におけるVI−VI矢視断面図である。なお、図4及び図6では、リール631の内部に収納されているシート状部材632の記載が省略されている。
[Configuration of Operation Display Unit 6]
Next, the configuration of the operation display unit 6 will be described with reference to FIGS. Here, FIG. 3 is a schematic plan view showing the configuration of the operation display unit 6. 4 is a cross-sectional view taken along arrow IV-IV in FIG. FIG. 5 is a view showing a state in which the covering portion 63 is extended to the inside of the display surface 611. 6 is a cross-sectional view taken along arrow VI-VI in FIG. 4 and 6, the description of the sheet-like member 632 housed inside the reel 631 is omitted.

操作表示部6は、画像処理装置10におけるユーザーインターフェイスである。図1に示されるように、操作表示部6は、画像処理装置10の筐体の上部において、画像読取部2より前後方向D2における前方側に設けられる。   The operation display unit 6 is a user interface in the image processing apparatus 10. As shown in FIG. 1, the operation display unit 6 is provided on the front side in the front-rear direction D <b> 2 from the image reading unit 2 in the upper part of the housing of the image processing apparatus 10.

図2〜図4に示されるように、操作表示部6は、表示部61、タッチセンサー62、被覆部63、第1移動検出部64、及び第2移動検出部65を備える。また、操作表示部6は、電源キー、及びスタートキーなどのハードキー(不図示)を備える。   2 to 4, the operation display unit 6 includes a display unit 61, a touch sensor 62, a covering unit 63, a first movement detection unit 64, and a second movement detection unit 65. Further, the operation display unit 6 includes power keys and hard keys (not shown) such as a start key.

表示部61は、制御部5からの制御指示に応じて各種の情報を表示する。例えば、表示部61は液晶ディスプレーである。図3及び図4に示されるように、表示部61は、表示面611を有する。表示面611には、ユーザーの操作に用いられる操作画面などの各種の画面が表示される。例えば、表示面611は矩形状である。   The display unit 61 displays various types of information according to control instructions from the control unit 5. For example, the display unit 61 is a liquid crystal display. As shown in FIGS. 3 and 4, the display unit 61 has a display surface 611. Various screens such as operation screens used for user operations are displayed on the display surface 611. For example, the display surface 611 has a rectangular shape.

例えば、操作表示部6は、図3に示されるように、表示面611が上下方向D1に垂直であって、表示面611の長手方向が左右方向D3に平行となる姿勢で、画像処理装置10に設けられる。なお、画像処理装置10において、操作表示部6が左右方向D3に平行な回転軸によって回動可能に支持されており、操作表示部6の姿勢が調整可能であってもよい。   For example, as shown in FIG. 3, the operation display unit 6 has an attitude in which the display surface 611 is perpendicular to the vertical direction D1 and the longitudinal direction of the display surface 611 is parallel to the horizontal direction D3. Is provided. In the image processing apparatus 10, the operation display unit 6 may be rotatably supported by a rotation axis parallel to the left-right direction D3, and the attitude of the operation display unit 6 may be adjustable.

表示面611の外周は、操作表示部6のフレーム6Aによって囲まれている。例えば、フレーム6Aは樹脂により形成される。例えば、図3に示されるように、フレーム6Aは前後方向D2における前方側が後方側より前後方向D2に幅広に形成されている。   The outer periphery of the display surface 611 is surrounded by the frame 6 </ b> A of the operation display unit 6. For example, the frame 6A is made of resin. For example, as shown in FIG. 3, the frame 6A is formed such that the front side in the front-rear direction D2 is wider in the front-rear direction D2 than the rear side.

タッチセンサー62は、表示面611における静電容量の変化を検出することが可能である。図4に示されるように、タッチセンサー62は、上下方向D1における表示面611の下側に設けられている。   The touch sensor 62 can detect a change in capacitance on the display surface 611. As shown in FIG. 4, the touch sensor 62 is provided on the lower side of the display surface 611 in the vertical direction D1.

タッチセンサー62は、表示面611における複数カ所における静電容量の変化を同時に検出することが可能である。即ち、画像処理装置10は、タッチセンサー62を用いてユーザーのマルチタッチ操作を検出することが可能である。また、画像処理装置10は、タッチセンサー62を用いてユーザーのシングルタッチ操作を検出することも可能である。   The touch sensor 62 can simultaneously detect capacitance changes at a plurality of locations on the display surface 611. That is, the image processing apparatus 10 can detect a user's multi-touch operation using the touch sensor 62. The image processing apparatus 10 can also detect a single touch operation of the user using the touch sensor 62.

ここで、前記マルチタッチ操作は、ユーザーが二本の指を用いて表示面611上で行う操作である。例えば、前記マルチタッチ操作には、ピンチアウト操作、及びピンチイン操作が含まれる。前記ピンチアウト操作は、ユーザーが二本の指を表示面611に接触させて、それらの指を表示面611上で互いに離間する方向に移動させる操作である。また、前記ピンチイン操作は、ユーザーが二本の指を表示面611に接触させて、それらの指を表示面611上で互いに接近する方向に移動させる操作である。なお、前記ピンチアウト操作及び前記ピンチイン操作は、前記マルチタッチ操作の一例に過ぎない。前記マルチタッチ操作は、前記ピンチアウト操作及び前記ピンチイン操作とは異なる他の操作を含むものであってもよい。   Here, the multi-touch operation is an operation performed on the display surface 611 by the user using two fingers. For example, the multi-touch operation includes a pinch-out operation and a pinch-in operation. The pinch-out operation is an operation in which a user brings two fingers into contact with the display surface 611 and moves the fingers in a direction away from each other on the display surface 611. In addition, the pinch-in operation is an operation in which the user brings two fingers into contact with the display surface 611 and moves the fingers in a direction approaching each other on the display surface 611. The pinch-out operation and the pinch-in operation are only examples of the multi-touch operation. The multi-touch operation may include other operations different from the pinch-out operation and the pinch-in operation.

また、前記シングルタッチ操作は、ユーザーが一本の指を用いて表示面611上で行う操作である。例えば、前記シングルタッチ操作には、タップ操作、及びスワイプ操作が含まれる。前記タップ操作は、ユーザーが一本の指を表示面611に接触させる操作である。また、前記スワイプ操作は、ユーザーが一本の指を表示面611に接触させて、その指を表示面611上で移動させる操作である。なお、前記タップ操作及び前記スワイプ操作は、前記シングルタッチ操作の一例に過ぎない。前記シングルタッチ操作は、前記タップ操作及び前記スワイプ操作とは異なる他の操作を含むものであってもよい。   The single touch operation is an operation performed on the display surface 611 by the user using one finger. For example, the single touch operation includes a tap operation and a swipe operation. The tap operation is an operation in which the user makes one finger contact the display surface 611. In addition, the swipe operation is an operation in which the user touches the display surface 611 with one finger and moves the finger on the display surface 611. The tap operation and the swipe operation are only examples of the single touch operation. The single touch operation may include another operation different from the tap operation and the swipe operation.

例えば、タッチセンサー62は、表示面611の下側にマトリクス状に配置された複数の電極を有する。タッチセンサー62は、指などの人体が前記電極に接近した際に前記電極に生じる静電容量の変化を検出する。例えば、前記電極には不図示の電源から交流電圧が印加されている。タッチセンサー62は、人体が前記電極に接近した際に人体と前記電極との間で形成されるコンデンサを介して流れる電流の有無に基づいて、前記電極における静電容量の変化を検出する。そして、タッチセンサー62は、前記電極各々における静電容量の変化を示す電気信号を出力する。タッチセンサー62から出力される電気信号は、制御部5によるユーザーの操作の検出に用いられる。   For example, the touch sensor 62 includes a plurality of electrodes arranged in a matrix form below the display surface 611. The touch sensor 62 detects a change in capacitance generated in the electrode when a human body such as a finger approaches the electrode. For example, an AC voltage is applied to the electrode from a power source (not shown). The touch sensor 62 detects a change in capacitance of the electrode based on the presence or absence of a current flowing through a capacitor formed between the human body and the electrode when the human body approaches the electrode. The touch sensor 62 outputs an electrical signal indicating a change in capacitance at each of the electrodes. The electrical signal output from the touch sensor 62 is used to detect a user operation by the control unit 5.

なお、タッチセンサー62による表示面611における静電容量の変化の検出方法は、以上に述べた方法と異なる方法が用いられてもよい。また、タッチセンサー62は、表示面611における一カ所のみの静電容量の変化を検出することが可能であってもよい。この場合、画像処理装置10は、タッチセンサー62を用いてユーザーの前記シングルタッチ操作のみを検出することが可能である。   Note that a method different from the method described above may be used as a method for detecting a change in capacitance on the display surface 611 by the touch sensor 62. Further, the touch sensor 62 may be able to detect a change in capacitance at only one place on the display surface 611. In this case, the image processing apparatus 10 can detect only the single touch operation of the user using the touch sensor 62.

ところで、表示面611上に操作無効領域を設定可能な情報処理装置が従来技術として知られている。この従来技術によれば、ユーザーは前記操作無効領域に指を置きつつ他の指で表示面611を操作することが可能となる。そのため、表示面611を操作するユーザーの操作負担が軽減される。   Incidentally, an information processing apparatus capable of setting an operation invalid area on the display surface 611 is known as a conventional technique. According to this prior art, the user can operate the display surface 611 with another finger while placing the finger in the operation invalid area. Therefore, the operation burden on the user who operates the display surface 611 is reduced.

しかしながら、上述の従来技術では、ユーザーが指を前記操作無効領域に置いた状態で他の指を用いて表示面611を操作する場合に、その操作が前記マルチタッチ操作として検出される。そのため、上述の従来技術は、前記シングルタッチ操作のみに対応するタッチセンサー62を備える情報処理装置には適用することができない。また、タッチセンサー62を用いた前記マルチタッチ操作の検出処理では、前記シングルタッチ操作の検出処理よりも複雑な計算処理が制御部5において行われることがある。そのため、上述の従来技術が前記マルチタッチ操作に対応するタッチセンサー62を備える情報処理装置に適用される場合、前記マルチタッチ操作が検出される機会が増加して、制御部5の処理負荷が増大することがある。   However, in the above-described conventional technology, when the user operates the display surface 611 using another finger while the finger is placed in the operation invalid area, the operation is detected as the multi-touch operation. Therefore, the above-described conventional technology cannot be applied to an information processing apparatus including the touch sensor 62 that supports only the single touch operation. In the detection process of the multi-touch operation using the touch sensor 62, a calculation process that is more complicated than the detection process of the single touch operation may be performed in the control unit 5. Therefore, when the above-described conventional technology is applied to an information processing apparatus including the touch sensor 62 corresponding to the multi-touch operation, the opportunity for detecting the multi-touch operation increases and the processing load of the control unit 5 increases. There are things to do.

これに対し、本発明の実施形態に係る画像処理装置10では、以下に説明するように、タッチセンサー62が前記シングルタッチ操作のみに対応する場合であっても、表示面611を操作するユーザーの操作負担を軽減することが可能である。また、本発明の実施形態に係る画像処理装置10では、タッチセンサー62が前記マルチタッチ操作に対応する場合に、表示面611を操作するユーザーの操作負担を軽減すると共に、制御部5の処理負荷を軽減することが可能である。   On the other hand, in the image processing apparatus 10 according to the embodiment of the present invention, as will be described below, even when the touch sensor 62 supports only the single touch operation, the user who operates the display surface 611 can operate. It is possible to reduce the operation burden. In the image processing apparatus 10 according to the embodiment of the present invention, when the touch sensor 62 supports the multi-touch operation, the operation burden on the user who operates the display surface 611 is reduced and the processing load on the control unit 5 is reduced. Can be reduced.

被覆部63は、表示面611の一部を覆うことが可能である。具体的に、図3及び図4に示されるように、被覆部63は、リール631、及びシート状部材632を備える。   The covering portion 63 can cover a part of the display surface 611. Specifically, as shown in FIGS. 3 and 4, the covering portion 63 includes a reel 631 and a sheet-like member 632.

リール631は、シート状部材632を巻き取ることが可能である。例えば、リール631は、図3及び図4に示されるように、画像処理装置10の左右方向D3に沿って長尺な略円筒形状に形成されている。図4に示されるように、リール631は、左右方向D3に沿って形成された孔部631Aを有する。また、リール631は、孔部631Aを中心に回転可能に設けられた円筒形状の巻取部631Bを有する。巻取部631Bは、不図示の巻き取りばねを用いて前後方向D2に沿って延伸されたシート状部材632を巻き取ることが可能である。なお、リール631は、巻取部631Bの前記巻き取りばねの付勢力に抗してシート状部材632を延伸された状態で固定するロック機構を有していてもよい。   The reel 631 can wind up the sheet-like member 632. For example, as shown in FIGS. 3 and 4, the reel 631 is formed in a substantially cylindrical shape that is long along the left-right direction D <b> 3 of the image processing apparatus 10. As shown in FIG. 4, the reel 631 has a hole 631A formed along the left-right direction D3. Further, the reel 631 has a cylindrical winding portion 631B provided to be rotatable around the hole 631A. The winding unit 631 </ b> B can wind up the sheet-like member 632 extended along the front-rear direction D <b> 2 using a winding spring (not shown). The reel 631 may have a lock mechanism that fixes the sheet-like member 632 in an extended state against the urging force of the take-up spring of the take-up portion 631B.

シート状部材632は、画像処理装置10の前後方向D2に長尺な帯状の部材である。例えば、シート状部材632は絶縁体によって形成される。シート状部材632の長手方向における一方の端部は、巻取部631Bの外周面に固定される。また、図3及び図4に示されるように、シート状部材632の長手方向における他方の端部には、爪部632Aが設けられている。   The sheet-like member 632 is a belt-like member that is long in the front-rear direction D <b> 2 of the image processing apparatus 10. For example, the sheet-like member 632 is formed of an insulator. One end portion of the sheet-like member 632 in the longitudinal direction is fixed to the outer peripheral surface of the winding portion 631B. Further, as shown in FIGS. 3 and 4, a claw portion 632 </ b> A is provided at the other end portion in the longitudinal direction of the sheet-like member 632.

例えば、図3に示されるように、シート状部材632は、リール631に巻き取られた状態において、表示面611の外周縁から外側へ退避した第2位置P2に配置される。また、シート状部材632は、ユーザーによってリール631から前後方向D2の後方側へと引き出されることで、図5に示されるように、表示面611の内部側へ延伸した第1位置P1に配置される。これにより、表示面611の一部の領域は、表示面611の内部側へ前後方向D2に沿って延伸されたシート状部材632によって覆われる。また、ユーザーは、リール631からのシート状部材632の前後方向D2に沿った引き出し量を調整することで、シート状部材632を表示面611の前後方向D2における任意の位置に配置することが可能である。即ち、被覆部63において、シート状部材632は、第1位置P1及び第2位置P2を通過する前後方向D2に沿って移動可能である。なお、ユーザーは、爪部632Aを用いることで、リール631からシート状部材632を容易に引き出すことが可能である。また、リール631から引き出されたシート状部材632は、巻取部631B(図4参照)の前記巻き取りばねによって巻き取られる。ここに、前後方向D2が、本発明における第1方向の一例である。   For example, as illustrated in FIG. 3, the sheet-like member 632 is disposed at the second position P <b> 2 that is retracted outward from the outer peripheral edge of the display surface 611 in the state of being wound around the reel 631. Further, the sheet-like member 632 is arranged at the first position P1 extended to the inner side of the display surface 611 as shown in FIG. 5 by being pulled out from the reel 631 to the rear side in the front-rear direction D2. The Thereby, a partial region of the display surface 611 is covered by the sheet-like member 632 that extends to the inside of the display surface 611 along the front-rear direction D2. Further, the user can arrange the sheet-like member 632 at an arbitrary position in the front-rear direction D2 of the display surface 611 by adjusting the amount of the sheet-like member 632 drawn from the reel 631 along the front-rear direction D2. It is. That is, in the covering portion 63, the sheet-like member 632 is movable along the front-rear direction D2 passing through the first position P1 and the second position P2. Note that the user can easily pull out the sheet-like member 632 from the reel 631 by using the claw portion 632A. Further, the sheet-like member 632 pulled out from the reel 631 is taken up by the take-up spring of the take-up portion 631B (see FIG. 4). Here, the front-rear direction D2 is an example of the first direction in the present invention.

図6に示されるように、画像処理装置10では、ユーザーが親指などの指Fをシート状部材632に置いた状態で他の指を用いて表示面611を操作する場合に、シート状部材632に置かれた指Fによる表示面611における静電容量の変化がシート状部材632によって阻害される。なお、シート状部材632は、指Fが置かれた状態で表示面611と接触してもよい。   As shown in FIG. 6, in the image processing apparatus 10, when the user operates the display surface 611 using another finger with a finger F such as a thumb placed on the sheet-like member 632, the sheet-like member 632. The sheet-like member 632 inhibits the change in electrostatic capacity on the display surface 611 due to the finger F placed on the sheet. Note that the sheet-like member 632 may contact the display surface 611 in a state where the finger F is placed.

これにより、画像処理装置10では、ユーザーが指をシート状部材632に置いた状態で他の指を用いて表示面611を操作する場合に、その操作が前記シングルタッチ操作として検出される。従って、タッチセンサー62が前記シングルタッチ操作のみに対応する場合であっても、表示面611を操作するユーザーの操作負担を軽減することが可能である。また、タッチセンサー62が前記マルチタッチ操作に対応する場合に、表示面611を操作するユーザーの操作負担を軽減すると共に、制御部5の処理負荷を軽減することが可能である。   Accordingly, in the image processing apparatus 10, when the user operates the display surface 611 using another finger while the finger is placed on the sheet-like member 632, the operation is detected as the single touch operation. Therefore, even when the touch sensor 62 supports only the single touch operation, it is possible to reduce the operation burden on the user who operates the display surface 611. Further, when the touch sensor 62 supports the multi-touch operation, it is possible to reduce the operation load on the user who operates the display surface 611 and reduce the processing load on the control unit 5.

ここで、画像処理装置10では、リール631が左右方向D3に沿って移動可能に設けられている。具体的に、図3に示されるように、フレーム6Aの前後方向D2における前方側には、溝部6Bが左右方向D3に沿って形成されている。例えば、図4に示されるように、溝部6Bは、リール631の底部の形状に沿った曲面状に形成されている。   Here, in the image processing apparatus 10, the reel 631 is provided to be movable along the left-right direction D3. Specifically, as shown in FIG. 3, a groove 6B is formed along the left-right direction D3 on the front side in the front-rear direction D2 of the frame 6A. For example, as shown in FIG. 4, the groove 6 </ b> B is formed in a curved shape along the shape of the bottom of the reel 631.

また、図3及び図4に示されるように、溝部6Bには、画像処理装置10の左右方向D3に沿って延設された棒状の支持部材6Cが設けられている。支持部材6Cは、リール631を左右方向D3に沿って摺動可能に支持する。例えば、支持部材6Cは、電気抵抗を有する抵抗体により形成される。例えば、支持部材6Cはスチールなどの金属により形成される。具体的に、図4に示されるように、リール631は、孔部631Aに支持部材6Cが挿通されることで、支持部材6Cにより左右方向D3に沿って摺動可能に支持される。これにより、ユーザーは、表示面611における左右方向D3の任意の位置に、シート状部材632を配置することが可能である。ここに、左右方向D3が、本発明における第2方向の一例である。また、支持部材6Cが、本発明における支持部の一例である。   As shown in FIGS. 3 and 4, the groove 6 </ b> B is provided with a rod-like support member 6 </ b> C extending along the left-right direction D <b> 3 of the image processing apparatus 10. The support member 6C supports the reel 631 so as to be slidable along the left-right direction D3. For example, the support member 6C is formed of a resistor having electric resistance. For example, the support member 6C is formed of a metal such as steel. Specifically, as shown in FIG. 4, the reel 631 is supported by the support member 6C so as to be slidable in the left-right direction D3 when the support member 6C is inserted through the hole 631A. Thereby, the user can arrange the sheet-like member 632 at an arbitrary position in the left-right direction D3 on the display surface 611. Here, the left-right direction D3 is an example of the second direction in the present invention. The support member 6C is an example of a support portion in the present invention.

また、図4に示されるように、画像処理装置10では、リール631の孔部631Aの周面と支持部材6Cの周面との間にブッシュ631Cが設けられている。ブッシュ631Cは、リール631が左右方向D3に沿って摺動される際の支持部材6Cとの間の摺動抵抗を上昇させる。これにより、リール631の左右方向D3に沿った移動が制限される。従って、シート状部材632に置かれた指の移動が規制されて、他の指を用いた操作における操作性が向上する。ここに、ブッシュ631Cが、本発明における移動制限部の一例である。なお、リール631と支持部材6Cとの間の摺動抵抗は、リール631の移動の制限による操作性の向上とリール631の移動のし易さとのバランスを考慮して適宜の値に設定されてよい。また、ブッシュ631Cは、設定された摺動抵抗を備える適宜の素材によって形成されるものであってよい。   4, in the image processing apparatus 10, a bush 631C is provided between the peripheral surface of the hole 631A of the reel 631 and the peripheral surface of the support member 6C. The bush 631C increases the sliding resistance with the support member 6C when the reel 631 is slid along the left-right direction D3. This restricts the movement of the reel 631 along the left-right direction D3. Therefore, the movement of the finger placed on the sheet-like member 632 is restricted, and the operability in the operation using other fingers is improved. Here, the bush 631C is an example of a movement restricting portion in the present invention. Note that the sliding resistance between the reel 631 and the support member 6C is set to an appropriate value in consideration of the balance between the improvement of operability due to the restriction of the movement of the reel 631 and the ease of movement of the reel 631. Good. Further, the bush 631C may be formed of an appropriate material having a set sliding resistance.

なお、画像処理装置10において、ブッシュ631Cに替えて、リール631の左右方向D3に沿った移動を予め定められた間隔ごとに仮止めするラッチ機構が、リール631と溝部6B又は支持部材6Cとの間に設けられていてもよい。ここに、前記ラッチ機構が、本発明における移動制限部の他の一例である。   In the image processing apparatus 10, a latch mechanism that temporarily stops the movement of the reel 631 along the left-right direction D3 at predetermined intervals instead of the bush 631C is formed between the reel 631 and the groove 6B or the support member 6C. It may be provided between them. Here, the latch mechanism is another example of the movement restricting portion in the present invention.

また、画像処理装置10において、フレーム6Aに溝部6Bが設けられていなくてもよい。例えば、フレーム6Aが、前後方向D2の前方側の角部各々から前方に向けて突出する一対の突出部を有しており、支持部材6Cが前記突出部各々に支持されていてもよい。   Further, in the image processing apparatus 10, the groove 6B may not be provided in the frame 6A. For example, the frame 6A may have a pair of protrusions that protrude forward from the front corners in the front-rear direction D2, and the support member 6C may be supported by each of the protrusions.

また、画像処理装置10において、フレーム6Aに支持部材6Cが設けられていなくてもよい。例えば、リール631は、溝部6Bによって左右方向D3に沿って摺動可能に支持されていてもよい。ここに、溝部6Bが、本発明における支持部の他の一例である。   In the image processing apparatus 10, the support member 6C may not be provided on the frame 6A. For example, the reel 631 may be slidably supported along the left-right direction D3 by the groove 6B. Here, the groove portion 6B is another example of the support portion in the present invention.

また、画像処理装置10において、リール631はフレーム6Aの左右方向D3における予め定められた位置に固定で配置されていてもよい。また、リール631及びシート状部材632の左右方向D3における長さが、表示面611の左右方向D3における長さを超えていてもよい。   Further, in the image processing apparatus 10, the reel 631 may be fixedly disposed at a predetermined position in the left-right direction D3 of the frame 6A. Further, the length of the reel 631 and the sheet-like member 632 in the left-right direction D3 may exceed the length of the display surface 611 in the left-right direction D3.

第1移動検出部64は、シート状部材632の前後方向D2における移動量を検出する。例えば、第1移動検出部64は、シート状部材632の第2位置P2からの移動量を検出する。例えば、図3に示されるように、リール631は可変抵抗器631Dを有する。可変抵抗器631Dは、巻取部631Bと接続されており、巻取部631Bの回転量に応じて抵抗値が変化する。例えば、第1移動検出部64は、可変抵抗器631Dの抵抗値に応じた電気信号を出力する電気回路である。   The first movement detection unit 64 detects the amount of movement of the sheet-like member 632 in the front-rear direction D2. For example, the first movement detection unit 64 detects the amount of movement of the sheet-like member 632 from the second position P2. For example, as shown in FIG. 3, the reel 631 has a variable resistor 631D. The variable resistor 631D is connected to the winding unit 631B, and the resistance value changes according to the rotation amount of the winding unit 631B. For example, the first movement detection unit 64 is an electric circuit that outputs an electric signal corresponding to the resistance value of the variable resistor 631D.

例えば、図4に示されるように、溝部6Bの前後方向D2における前方側の側面には、第1電極6D及び第2電極6Eが設けられている。第1電極6D及び第2電極6Eは、左右方向D3に沿って長尺状である。また、第1電極6D及び第2電極6Eは、リール631に設けられた一対の電極(不図示)と電気的に接続されている。前記一対の電極は、可変抵抗器631D(図3参照)と電気的に接続されている。第1移動検出部64は、第1電極6D及び第2電極6Eを介して電気的に接続された可変抵抗器631Dの抵抗値に応じた電気信号を出力する。   For example, as shown in FIG. 4, a first electrode 6D and a second electrode 6E are provided on the front side surface in the front-rear direction D2 of the groove 6B. The first electrode 6D and the second electrode 6E are elongated along the left-right direction D3. The first electrode 6D and the second electrode 6E are electrically connected to a pair of electrodes (not shown) provided on the reel 631. The pair of electrodes is electrically connected to a variable resistor 631D (see FIG. 3). The first movement detection unit 64 outputs an electrical signal corresponding to the resistance value of the variable resistor 631D electrically connected via the first electrode 6D and the second electrode 6E.

第2移動検出部65は、リール631の左右方向D3における移動量を検出する。例えば、第2移動検出部65は、リール631の、支持部材6Cにおける左右方向D3の左側の端部が配置される第3位置P3(図3参照)からの移動量を検出する。例えば、第2移動検出部65は、第3位置P3からリール631における左右方向D3の左側の端部と支持部材6Cとが接触する第4位置P4(図3参照)までの距離に対応する支持部材6Cの抵抗値に応じた電気信号を出力する電気回路である。   The second movement detection unit 65 detects the amount of movement of the reel 631 in the left-right direction D3. For example, the second movement detection unit 65 detects the amount of movement of the reel 631 from the third position P3 (see FIG. 3) where the left end of the support member 6C in the left-right direction D3 is disposed. For example, the second movement detection unit 65 supports the distance corresponding to the distance from the third position P3 to the fourth position P4 (see FIG. 3) where the left end of the reel 631 in the left-right direction D3 contacts the support member 6C. It is an electric circuit that outputs an electric signal corresponding to the resistance value of the member 6C.

例えば、図4に示されるように、溝部6Bの前後方向D2における前方側の側面には、第3電極6Fが設けられている。第3電極6Fは、左右方向D3に沿って長尺状である。また、第3電極6Fは、リール631に設けられた電極(不図示)と電気的に接続されている。前記電極は、第4位置P4で支持部材6Cと電気的に接続されている。また、第2移動検出部65は、第3位置P3で支持部材6Cと電気的に接続されている。第2移動検出部65は、第3電極6Fを介して電気的に接続された支持部材6Cの第3位置P3から第4位置P4までの距離に対応する抵抗値に応じた電気信号を出力する。   For example, as shown in FIG. 4, the third electrode 6F is provided on the front side surface in the front-rear direction D2 of the groove 6B. The third electrode 6F is elongated along the left-right direction D3. The third electrode 6F is electrically connected to an electrode (not shown) provided on the reel 631. The electrode is electrically connected to the support member 6C at the fourth position P4. In addition, the second movement detection unit 65 is electrically connected to the support member 6C at the third position P3. The second movement detection unit 65 outputs an electrical signal corresponding to a resistance value corresponding to the distance from the third position P3 to the fourth position P4 of the support member 6C electrically connected via the third electrode 6F. .

第1移動検出部64、及び第2移動検出部65から出力される電気信号は、制御部5による表示面611における被覆部63に覆われた被覆領域の検出に用いられる。   The electrical signals output from the first movement detection unit 64 and the second movement detection unit 65 are used by the control unit 5 to detect the covering region covered with the covering unit 63 on the display surface 611.

一方、制御部5の前記ROMには、前記CPUに後述の操作検出処理(図7のフローチャート参照)を実行させるための操作検出プログラムが予め記憶されている。なお、前記操作検出プログラムは、CD、DVD、フラッシュメモリーなどのコンピューター読み取り可能な記録媒体に記録されており、前記記録媒体から読み取られて制御部5の前記EEPROM等の記憶部にインストールされるものであってもよい。   On the other hand, the ROM of the control unit 5 stores in advance an operation detection program for causing the CPU to execute an operation detection process (see the flowchart of FIG. 7) described later. The operation detection program is recorded on a computer-readable recording medium such as a CD, a DVD, or a flash memory, and is read from the recording medium and installed in a storage unit such as the EEPROM of the control unit 5. It may be.

そして、制御部5は、図2に示されるように、第1表示処理部51、領域検出部52、第2表示処理部53、操作検出部54、処理実行部55、及び報知処理部56を含む。具体的に、制御部5は、前記CPUを用いて前記ROMに記憶されている前記操作検出プログラムを実行する。これにより、制御部5は、第1表示処理部51、領域検出部52、第2表示処理部53、操作検出部54、処理実行部55、及び報知処理部56として機能する。ここに、制御部5及び操作表示部6を備える装置が、本発明における表示入力装置の一例である。   Then, as shown in FIG. 2, the control unit 5 includes a first display processing unit 51, a region detection unit 52, a second display processing unit 53, an operation detection unit 54, a process execution unit 55, and a notification processing unit 56. Including. Specifically, the control unit 5 executes the operation detection program stored in the ROM using the CPU. Thereby, the control unit 5 functions as the first display processing unit 51, the region detection unit 52, the second display processing unit 53, the operation detection unit 54, the process execution unit 55, and the notification processing unit 56. Here, a device including the control unit 5 and the operation display unit 6 is an example of a display input device in the present invention.

第1表示処理部51は、表示面611にユーザーの操作に用いられる操作画面を表示する。例えば、第1表示処理部51は、画像処理装置10の電源が投入された場合、又は画像処理装置10の動作モードがスリープモードから通常モードに移行した場合に、表示面611に前記操作画面を表示させる。例えば、前記操作画面には、複数の操作アイコン及び背景画像が表示される。   The first display processing unit 51 displays an operation screen used for a user operation on the display surface 611. For example, the first display processing unit 51 displays the operation screen on the display surface 611 when the power of the image processing apparatus 10 is turned on or when the operation mode of the image processing apparatus 10 shifts from the sleep mode to the normal mode. Display. For example, a plurality of operation icons and a background image are displayed on the operation screen.

領域検出部52は、表示面611における被覆部63に覆われた被覆領域を検出する。例えば、領域検出部52は、第1移動検出部64及び第2移動検出部65から出力される電気信号に基づいて、前記被覆領域を検出する。   The area detection unit 52 detects a covered area covered with the covering part 63 on the display surface 611. For example, the region detection unit 52 detects the covering region based on electrical signals output from the first movement detection unit 64 and the second movement detection unit 65.

第2表示処理部53は、表示面611上に前記被覆領域の外周域を含む予め定められた範囲の操作無効領域R1(図5参照)を他の領域と識別可能に表示する。具体的に、第2表示処理部53は、領域検出部52によって検出された前記被覆領域に基づいて、操作無効領域R1を特定する。例えば、操作無効領域R1は、前記被覆領域の外周域から予め定められた特定距離の範囲内の領域である。なお、操作無効領域R1は、前記被覆領域を含まない領域であってもよい。また、前記特定距離は、操作表示部6におけるユーザーの操作に応じて任意に設定されてもよい。ここに、第2表示処理部53が、本発明における表示処理部の一例である。   The second display processing unit 53 displays an operation invalid area R1 (see FIG. 5) in a predetermined range including the outer peripheral area of the covering area on the display surface 611 so as to be distinguishable from other areas. Specifically, the second display processing unit 53 specifies the operation invalid region R1 based on the covered region detected by the region detection unit 52. For example, the operation invalid area R1 is an area within a predetermined distance range from the outer peripheral area of the covering area. The operation invalid area R1 may be an area that does not include the covered area. The specific distance may be arbitrarily set according to a user operation on the operation display unit 6. Here, the second display processing unit 53 is an example of the display processing unit in the present invention.

例えば、第2表示処理部53は、表示面611に前記操作画面が表示されている場合に、特定された操作無効領域R1の表示を半透明の表示に変更する。なお、第2表示処理部53は、特定された操作無効領域R1にぼかし処理又はモザイク処理を実行してもよい。また、第2表示処理部53は、特定された操作無効領域R1の表示色を変更してもよい。また、第2表示処理部53は、特定された操作無効領域R1に塗りつぶし処理を行ってもよい。また、第2表示処理部53は、特定された操作無効領域R1の表示を消灯してもよい。   For example, when the operation screen is displayed on the display surface 611, the second display processing unit 53 changes the display of the specified operation invalid area R1 to a translucent display. Note that the second display processing unit 53 may execute a blurring process or a mosaic process on the specified operation invalid area R1. In addition, the second display processing unit 53 may change the display color of the specified operation invalid area R1. Further, the second display processing unit 53 may perform a filling process on the specified operation invalid area R1. Further, the second display processing unit 53 may turn off the display of the specified operation invalid area R1.

操作検出部54は、表示面611における静電容量の変化に基づいて、表示面611へのユーザーの操作を検出する。具体的に、操作検出部54は、タッチセンサー62から出力される電気信号に基づいて、表示面611へのユーザーの操作を検出する。   The operation detection unit 54 detects a user operation on the display surface 611 based on a change in capacitance on the display surface 611. Specifically, the operation detection unit 54 detects a user operation on the display surface 611 based on an electrical signal output from the touch sensor 62.

例えば、操作検出部54は、表示面611における静電容量の変化に基づいて、前記ピンチアウト操作、及び前記ピンチイン操作を含む前記マルチタッチ操作を検出する。また、操作検出部54は、表示面611における静電容量の変化に基づいて、前記タップ操作、及び前記スワイプ操作を含む前記シングルタッチ操作を検出する。   For example, the operation detection unit 54 detects the multi-touch operation including the pinch-out operation and the pinch-in operation based on a change in capacitance on the display surface 611. Further, the operation detection unit 54 detects the single touch operation including the tap operation and the swipe operation based on a change in capacitance on the display surface 611.

また、操作検出部54は、操作無効領域R1ではユーザーの操作を検出しない。   Further, the operation detection unit 54 does not detect a user operation in the operation invalid area R1.

処理実行部55は、操作検出部54によって検出されたユーザーの操作に応じた処理を実行する。   The process execution unit 55 executes a process according to the user operation detected by the operation detection unit 54.

例えば、処理実行部55は、前記操作画面に表示される複数の前記操作アイコンのうちのいずれか一つに対する前記タップ操作が検出された場合に、操作された前記操作アイコンに対応する処理を実行する。また、処理実行部55は、前記操作画面に対する前記スワイプ操作が検出された場合に、表示面611に表示される前記操作画面を、表示される前記操作アイコン及び背景画像が異なる他の前記操作画面に変更する処理を実行する。   For example, the process execution unit 55 executes a process corresponding to the operated operation icon when the tap operation on any one of the plurality of operation icons displayed on the operation screen is detected. To do. In addition, when the swipe operation on the operation screen is detected, the process execution unit 55 displays the operation screen displayed on the display surface 611 as another operation screen in which the displayed operation icon and background image are different. Execute the process to change to.

また、処理実行部55は、前記操作画面に対する前記ピンチアウト操作が検出された場合に、表示面611に表示される前記操作画面に含まれる画像を拡大する処理を実行する。また、処理実行部55は、前記操作画面に対する前記ピンチイン操作が検出された場合に、表示面611に表示される前記操作画面に含まれる画像を縮小する処理を実行する。   Further, the process execution unit 55 executes a process of enlarging an image included in the operation screen displayed on the display surface 611 when the pinch-out operation for the operation screen is detected. Further, the process execution unit 55 executes a process of reducing an image included in the operation screen displayed on the display surface 611 when the pinch-in operation on the operation screen is detected.

なお、操作検出部54は、領域検出部52によって検出された操作無効領域R1においてユーザーの操作を検出してもよい。この場合、処理実行部55は、操作検出部54によって検出されたユーザーの操作が操作無効領域R1において行われたものである場合に、ユーザーの操作に応じた処理を実行しないものであってもよい。   The operation detection unit 54 may detect a user operation in the operation invalid region R1 detected by the region detection unit 52. In this case, even when the user operation detected by the operation detection unit 54 is performed in the operation invalid region R1, the process execution unit 55 does not execute the process according to the user operation. Good.

報知処理部56は、操作無効領域R1で静電容量の変化が検出された場合にその旨を報知する。具体的に、報知処理部56は、タッチセンサー62から出力される電気信号に基づいて、操作無効領域R1における静電容量の変化を検出する。   When the change in capacitance is detected in the operation invalid region R1, the notification processing unit 56 notifies that fact. Specifically, the notification processing unit 56 detects a change in capacitance in the operation invalid region R <b> 1 based on the electrical signal output from the touch sensor 62.

例えば、報知処理部56は、操作無効領域R1で静電容量の変化が検出された場合に、操作無効領域R1の表示態様を変更する。例えば、報知処理部56は、操作無効領域R1で静電容量の変化が検出された場合に、操作無効領域R1の表示を点滅させる。   For example, the notification processing unit 56 changes the display mode of the operation invalid region R1 when a change in capacitance is detected in the operation invalid region R1. For example, the notification processing unit 56 blinks the display of the operation invalid region R1 when a change in capacitance is detected in the operation invalid region R1.

なお、報知処理部56は、操作無効領域R1で静電容量の変化が検出された場合に、操作無効領域R1で操作が検出された旨を示すメッセージを表示面611に表示させてもよい。また、報知処理部56は、操作無効領域R1で静電容量の変化が検出された場合に、予め設定された警告音を鳴動させてもよい。また、操作表示部6が表示面611を振動させる振動部を備える場合、報知処理部56は、操作無効領域R1で静電容量の変化が検出された場合に、前記振動部を用いて表示面611を振動させてもよい。   Note that the notification processing unit 56 may cause the display surface 611 to display a message indicating that an operation has been detected in the operation invalid region R1 when a change in capacitance is detected in the operation invalid region R1. Further, the notification processing unit 56 may sound a preset warning sound when a change in capacitance is detected in the operation invalid region R1. Further, when the operation display unit 6 includes a vibration unit that vibrates the display surface 611, the notification processing unit 56 uses the vibration unit to display the display surface when a change in capacitance is detected in the operation invalid region R1. 611 may be vibrated.

[操作検出処理]
以下、図7を参照しつつ、画像処理装置10において制御部5により実行される操作検出処理の手順の一例について説明する。ここで、ステップS1、S2・・・は、制御部5により実行される処理手順(ステップ)の番号を表している。例えば、前記操作検出処理は、画像処理装置10の電源が投入された場合、又は前記動作モードが前記スリープモードから前記通常モードに移行した場合に実行される。
[Operation detection processing]
Hereinafter, an example of the procedure of the operation detection process executed by the control unit 5 in the image processing apparatus 10 will be described with reference to FIG. Here, steps S1, S2,... Represent processing procedure (step) numbers executed by the control unit 5. For example, the operation detection process is executed when the power of the image processing apparatus 10 is turned on or when the operation mode shifts from the sleep mode to the normal mode.

<ステップS1>
まず、ステップS1において、制御部5は、表示面611にユーザーの操作に用いられる前記操作画面を表示する。ここで、ステップS1の処理は、制御部5の第1表示処理部51により実行される。
<Step S1>
First, in step S <b> 1, the control unit 5 displays the operation screen used for user operation on the display surface 611. Here, the process of step S <b> 1 is executed by the first display processing unit 51 of the control unit 5.

<ステップS2>
ステップS2において、制御部5は、表示面611の一部が被覆部63によって覆われたか否かを判断する。例えば、制御部5は、第1移動検出部64から出力される電気信号に基づいて、シート状部材632の第2位置P2からの移動の有無、即ち表示面611の一部が被覆部63によって覆われたか否かを判断する。
<Step S2>
In step S <b> 2, the control unit 5 determines whether a part of the display surface 611 is covered with the covering unit 63. For example, the controller 5 determines whether or not the sheet-like member 632 has moved from the second position P <b> 2 based on the electrical signal output from the first movement detector 64, i.e., part of the display surface 611 is covered by the cover 63. Determine if it is covered.

また、以下に述べるステップS3及びステップS4の処理が実行された後にステップS2の処理が実行される場合、制御部5は、ユーザーによって表示面611における前記被覆領域の範囲が変更されたか否かを判断する。   In addition, when the process of step S2 is performed after the process of steps S3 and S4 described below is performed, the control unit 5 determines whether or not the range of the covering area on the display surface 611 has been changed by the user. to decide.

ここで、制御部5は、表示面611の一部が被覆部63によって覆われたと判断すると(S2のYes側)、処理をステップS3に移行させる。また、表示面611の一部が被覆部63によって覆われていなければ(S2のNo側)、制御部5は、処理をステップS5に移行させる。   Here, if the control part 5 judges that a part of display surface 611 was covered with the coating | coated part 63 (Yes side of S2), it will transfer a process to step S3. Moreover, if a part of display surface 611 is not covered with the coating | coated part 63 (No side of S2), the control part 5 will transfer a process to step S5.

<ステップS3>
ステップS3において、制御部5は、表示面611における前記被覆領域を検出する。例えば、制御部5は、第1移動検出部64及び第2移動検出部65から出力される電気信号に基づいて、前記被覆領域を検出する。ここで、ステップS3の処理は、制御部5の領域検出部52により実行される。
<Step S3>
In step S <b> 3, the control unit 5 detects the covering region on the display surface 611. For example, the control unit 5 detects the covering region based on electrical signals output from the first movement detection unit 64 and the second movement detection unit 65. Here, the process of step S <b> 3 is executed by the region detection unit 52 of the control unit 5.

<ステップS4>
ステップS4において、制御部5は、前記操作画面における操作無効領域R1の表示態様を変更する。具体的に、制御部5は、ステップS3で検出された前記被覆領域に基づいて、操作無効領域R1を特定する。また、制御部5は、特定された操作無効領域R1の表示を半透明の表示に変更する。ここで、ステップS4の処理は、制御部5の第2表示処理部53により実行される。これにより、ユーザーは表示面611における操作無効領域R1を避けて操作を行うことが可能となり、ユーザーによる操作無効領域R1への無駄な操作が回避される。
<Step S4>
In step S4, the control unit 5 changes the display mode of the operation invalid area R1 on the operation screen. Specifically, the control unit 5 specifies the operation invalid area R1 based on the covered area detected in step S3. In addition, the control unit 5 changes the display of the specified operation invalid area R1 to a translucent display. Here, the process of step S <b> 4 is executed by the second display processing unit 53 of the control unit 5. Accordingly, the user can perform an operation while avoiding the operation invalid area R1 on the display surface 611, and a useless operation to the operation invalid area R1 by the user is avoided.

<ステップS5>
ステップS5において、制御部5は、表示面611における静電容量が変化したか否かを判断する。具体的に、制御部5は、タッチセンサー62から出力される電気信号に基づいて、表示面611における静電容量が変化したか否かを判断する。
<Step S5>
In step S5, the control unit 5 determines whether or not the capacitance on the display surface 611 has changed. Specifically, the control unit 5 determines whether or not the capacitance on the display surface 611 has changed based on the electrical signal output from the touch sensor 62.

ここで、制御部5は、表示面611における静電容量が変化したと判断すると(S5のYes側)、処理をステップS6に移行させる。また、表示面611における静電容量が変化していなければ(S5のNo側)、制御部5は、処理をステップS9に移行させる。   Here, if the control part 5 judges that the electrostatic capacitance in the display surface 611 has changed (Yes side of S5), it will transfer a process to step S6. Moreover, if the electrostatic capacitance in the display surface 611 is not changing (No side of S5), the control part 5 will transfer a process to step S9.

<ステップS6>
ステップS6において、制御部5は、ステップS5で検出された静電容量の変化が操作無効領域R1におけるものであるか否かを判断する。
<Step S6>
In step S6, the control unit 5 determines whether or not the change in capacitance detected in step S5 is in the operation invalid region R1.

ここで、制御部5は、ステップS5で検出された静電容量の変化が操作無効領域R1におけるものであると判断すると(S6のYes側)、処理をステップS61に移行させる。また、ステップS5で検出された静電容量の変化が操作無効領域R1におけるものでなければ(S6のNo側)、制御部5は、処理をステップS7に移行させる。   If the control unit 5 determines that the change in capacitance detected in step S5 is in the operation invalid region R1 (Yes in S6), the process proceeds to step S61. If the change in capacitance detected in step S5 is not in the operation invalid region R1 (No side in S6), the control unit 5 shifts the process to step S7.

<ステップS7>
ステップS7において、制御部5は、ステップS5で検出された静電容量の変化に基づいて、表示面611へのユーザーの操作を検出する。例えば、制御部5は、表示面611における静電容量の変化に基づいて、前記マルチタッチ操作、及び前記シングルタッチ操作を検出する。ここで、ステップS7の処理は、制御部5の操作検出部54により実行される。
<Step S7>
In step S <b> 7, the control unit 5 detects a user operation on the display surface 611 based on the change in capacitance detected in step S <b> 5. For example, the control unit 5 detects the multi-touch operation and the single touch operation based on a change in capacitance on the display surface 611. Here, the process of step S <b> 7 is executed by the operation detection unit 54 of the control unit 5.

<ステップS8>
ステップS8において、制御部5は、ステップS7で検出されたユーザーの操作に応じた処理を実行する。例えば、制御部5は、前記操作画面に表示される複数の前記操作アイコンのうちのいずれか一つに対する前記タップ操作が検出された場合に、操作された前記操作アイコンに対応する処理を実行する。ここで、ステップS8の処理は、制御部5の処理実行部55により実行される。
<Step S8>
In step S8, the control unit 5 executes a process according to the user operation detected in step S7. For example, the control unit 5 executes processing corresponding to the operated operation icon when the tap operation on any one of the plurality of operation icons displayed on the operation screen is detected. . Here, the process of step S <b> 8 is executed by the process execution unit 55 of the control unit 5.

一方、前記操作検出処理では、ステップS6で静電容量の変化が操作無効領域R1におけるものであると判断された場合に、ステップS7の処理が実行されない。これにより、シート状部材632に置かれたユーザーの指と表示面611との接触に起因する誤操作の発生が抑制される。   On the other hand, in the operation detection process, when it is determined in step S6 that the change in capacitance is in the operation invalid area R1, the process in step S7 is not executed. Thereby, the occurrence of an erroneous operation due to the contact between the user's finger placed on the sheet-like member 632 and the display surface 611 is suppressed.

なお、ステップS6の処理は、ステップS7の処理の実行後に実行されてもよい。この場合、ステップS6では、ステップS7で検出されたユーザーの操作が操作無効領域R1で行われたものであるか否かが判断される。   In addition, the process of step S6 may be performed after execution of the process of step S7. In this case, in step S6, it is determined whether or not the user operation detected in step S7 is performed in the operation invalid area R1.

<ステップS61>
ステップS61において、制御部5は、操作無効領域R1で静電容量の変化が検出された旨を報知する。例えば、制御部5は、操作無効領域R1の表示を点滅させる。ここで、ステップS61の処理は、制御部5の報知処理部56により実行される。これにより、ユーザーにシート状部材632に置かれた指が表示面611と接触していることを認識させて、ユーザーによる指をシート状部材632に戻す動作を促すことが可能となる。従って、シート状部材632に置かれたユーザーの指と表示面611との接触に起因する誤操作の発生がより抑制される。また、ユーザーの指と表示面611との接触状態が早期に解消されるため、前記マルチタッチ操作の検出処理の実行に起因する制御部5の高負荷状態が早期に解消される。
<Step S61>
In step S61, the control unit 5 notifies that a change in capacitance has been detected in the operation invalid region R1. For example, the control unit 5 blinks the display of the operation invalid area R1. Here, the process of step S <b> 61 is performed by the notification processing unit 56 of the control unit 5. As a result, the user can recognize that the finger placed on the sheet-like member 632 is in contact with the display surface 611 and prompt the user to return the finger to the sheet-like member 632. Therefore, the occurrence of an erroneous operation due to the contact between the user's finger placed on the sheet-like member 632 and the display surface 611 is further suppressed. Further, since the contact state between the user's finger and the display surface 611 is resolved early, the high load state of the control unit 5 resulting from the execution of the detection process of the multi-touch operation is resolved early.

<ステップS9>
ステップS9において、制御部5は、表示面611に表示された前記操作画面の表示を終了するユーザーの操作が行われたか否かを判断する。例えば、制御部5は、画像処理装置10の電源が遮断された場合、又は操作表示部6において前記通常モードから前記スリープモードへの移行を指示するユーザーの操作が行われた場合に、前記操作画面の表示を終了するユーザーの操作が行われたと判断する。
<Step S9>
In step S <b> 9, the control unit 5 determines whether or not a user operation for ending the display of the operation screen displayed on the display surface 611 has been performed. For example, when the power of the image processing apparatus 10 is shut off, or when a user operation that instructs the operation display unit 6 to shift from the normal mode to the sleep mode is performed, the control unit 5 performs the operation. It is determined that the user's operation to end the screen display has been performed.

ここで、制御部5は、前記操作画面の表示を終了するユーザーの操作が行われたと判断すると(S9のYes側)、前記操作検出処理を終了させる。また、前記操作画面の表示を終了するユーザーの操作が行われていなければ(S9のNo側)、制御部5は、処理をステップS2に移行させて、前記操作画面の表示を終了するユーザーの操作が行われるまでの間、ユーザーによる前記被覆領域の範囲の変更、又は表示面611における静電容量の変化を待ち受ける。   Here, when the control unit 5 determines that the user's operation to end the display of the operation screen has been performed (Yes in S9), the control unit 5 ends the operation detection process. If the user's operation to end the display of the operation screen has not been performed (No side of S9), the control unit 5 shifts the process to step S2 and displays the operation screen. Until the operation is performed, the user waits for a change in the range of the covering region or a change in the capacitance on the display surface 611.

このように、画像処理装置10では、操作表示部6に、表示面611の一部を覆う被覆部63が設けられている。これにより、ユーザーは指を被覆部63に置いた状態で他の指を用いて表示面611を操作することが可能である。従って、タッチセンサー62が前記シングルタッチ操作のみに対応する場合であっても、表示面611を操作するユーザーの操作負担を軽減することが可能である。また、タッチセンサー62が前記マルチタッチ操作に対応する場合に、表示面611を操作するユーザーの操作負担を軽減すると共に、制御部5の処理負荷を軽減することが可能である。   As described above, in the image processing apparatus 10, the operation display unit 6 is provided with the covering unit 63 that covers a part of the display surface 611. Thus, the user can operate the display surface 611 using another finger while the finger is placed on the covering portion 63. Therefore, even when the touch sensor 62 supports only the single touch operation, it is possible to reduce the operation burden on the user who operates the display surface 611. Further, when the touch sensor 62 supports the multi-touch operation, it is possible to reduce the operation load on the user who operates the display surface 611 and reduce the processing load on the control unit 5.

なお、画像処理装置10において、フレーム6Aにリール631が設けられていなくてもよい。例えば、図8に示されるように、フレーム6Aにシート状部材632を収容する収容部6Gが設けられていてもよい。この場合、シート状部材632が、本発明における被覆部の他の一例である。   In the image processing apparatus 10, the reel 631 may not be provided on the frame 6A. For example, as illustrated in FIG. 8, an accommodation portion 6G that accommodates the sheet-like member 632 may be provided in the frame 6A. In this case, the sheet-like member 632 is another example of the covering portion in the present invention.

1 ADF
2 画像読取部
3 画像形成部
4 給紙部
5 制御部
6 操作表示部
10 画像処理装置
51 第1表示処理部
52 領域検出部
53 第2表示処理部
54 操作検出部
55 処理実行部
56 報知処理部
61 表示部
611 表示面
62 タッチセンサー
63 被覆部
631 リール
632 シート状部材
64 第1移動検出部
65 第2移動検出部
1 ADF
2 image reading unit 3 image forming unit 4 paper feeding unit 5 control unit 6 operation display unit 10 image processing device 51 first display processing unit 52 region detection unit 53 second display processing unit 54 operation detection unit 55 process execution unit 56 notification process Unit 61 display unit 611 display surface 62 touch sensor 63 covering unit 631 reel 632 sheet-like member 64 first movement detection unit 65 second movement detection unit

Claims (10)

表示面を有する表示部と、
前記表示面における静電容量の変化に基づいて前記表示面へのユーザーの操作を検出する操作検出部と、
前記表示面の外周縁よりも外側の位置から前記表示面の内部側へ延伸した第1位置と前記表示面の外周縁から外側へ退避した第2位置との間で移動可能に設けられ、前記第1位置において前記表示面の一部を覆う被覆部と、
を備える表示入力装置。
A display unit having a display surface;
An operation detection unit that detects a user operation on the display surface based on a change in capacitance on the display surface;
Provided between a first position extended from a position outside the outer peripheral edge of the display surface to the inner side of the display surface and a second position retracted outward from the outer peripheral edge of the display surface; A covering portion covering a part of the display surface at a first position;
A display input device comprising:
前記被覆部は、前記第1位置及び前記第2位置を通過する第1方向に垂直であって前記表示面に平行な第2方向に沿って移動可能に設けられている請求項1に記載の表示入力装置。   The said coating | coated part is provided so that a movement is possible along the 2nd direction perpendicular | vertical to the 1st direction which passes the said 1st position and the said 2nd position, and parallel to the said display surface. Display input device. 前記表示面は矩形状であって、
前記第2方向は前記表示面の一辺と平行であって、
前記表示入力装置は、前記表示面の外周において前記第2方向に沿って延設され、前記被覆部を前記第2方向に摺動可能に支持する支持部を更に備える請求項2に記載の表示入力装置。
The display surface is rectangular,
The second direction is parallel to one side of the display surface,
3. The display according to claim 2, wherein the display input device further includes a support portion that extends along the second direction on an outer periphery of the display surface and supports the covering portion so as to be slidable in the second direction. Input device.
前記被覆部の前記第2方向に沿った移動を制限可能な移動制限部を更に備える請求項2又は3に記載の表示入力装置。   The display input device according to claim 2, further comprising a movement restriction unit capable of restricting movement of the covering unit along the second direction. 前記被覆部は、リールと、前記リールに巻き取られるシート状部材とを含み、前記シート状部材は、前記リールから引き出されることによって前記第1位置に配置され、前記リールに巻き取られることによって前記第2位置に配置される請求項1〜4のいずれかに記載の表示入力装置。   The covering portion includes a reel and a sheet-like member wound around the reel, and the sheet-like member is disposed at the first position by being pulled out from the reel, and is wound around the reel. The display input device according to claim 1, which is disposed at the second position. 前記被覆部の一部又は全部は絶縁体によって形成されている請求項1〜5のいずれかに記載の表示入力装置。   The display input device according to claim 1, wherein a part or all of the covering portion is formed of an insulator. 前記表示面における前記被覆部に覆われた被覆領域を検出する領域検出部を更に備え、
前記操作検出部は、前記被覆領域の外周域を含む予め定められた範囲の操作無効領域ではユーザーの操作を検出しない請求項1〜6のいずれかに記載の表示入力装置。
An area detecting unit for detecting a covering area covered with the covering part on the display surface;
The display input device according to claim 1, wherein the operation detection unit does not detect a user operation in an operation invalid area in a predetermined range including an outer peripheral area of the covering area.
前記表示面上に前記操作無効領域を他の領域と識別可能に表示する表示処理部を更に備える請求項7に記載の表示入力装置。   The display input device according to claim 7, further comprising a display processing unit that displays the operation invalid area on the display surface so as to be distinguishable from other areas. 前記操作無効領域で静電容量の変化が検出された場合にその旨を報知する報知処理部を更に備える請求項7又は8に記載の表示入力装置。   The display input device according to claim 7 or 8, further comprising a notification processing unit that notifies that change in capacitance is detected in the operation invalid region. 請求項1〜9のいずれかに記載の表示入力装置を備える情報処理装置。
An information processing apparatus comprising the display input device according to claim 1.
JP2016063123A 2016-03-28 2016-03-28 Display input device, information processing device Expired - Fee Related JP6418191B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016063123A JP6418191B2 (en) 2016-03-28 2016-03-28 Display input device, information processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016063123A JP6418191B2 (en) 2016-03-28 2016-03-28 Display input device, information processing device

Publications (2)

Publication Number Publication Date
JP2017183772A JP2017183772A (en) 2017-10-05
JP6418191B2 true JP6418191B2 (en) 2018-11-07

Family

ID=60006562

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016063123A Expired - Fee Related JP6418191B2 (en) 2016-03-28 2016-03-28 Display input device, information processing device

Country Status (1)

Country Link
JP (1) JP6418191B2 (en)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5669169B2 (en) * 2009-07-28 2015-02-12 Necカシオモバイルコミュニケーションズ株式会社 Terminal device and program

Also Published As

Publication number Publication date
JP2017183772A (en) 2017-10-05

Similar Documents

Publication Publication Date Title
JP5410555B2 (en) Touch panel device
JP6222186B2 (en) Operation panel and image forming apparatus having the same
US9475663B2 (en) Image forming apparatus
JP6565703B2 (en) Operation terminal and image processing apparatus to which it is removable
US9516182B2 (en) Image forming apparatus that enhances operability on screen displayed as split screens
JP6098056B2 (en) Compound machine
JP6911730B2 (en) Display device, image processing device, processing execution method, processing execution program
JP2010056009A (en) Inputting device and multi-functional peripheral device
US10708455B2 (en) Operation input device capable of notifying operation icon by voice, image processing apparatus, notifying method, process executing method
JP6418191B2 (en) Display input device, information processing device
JP5173924B2 (en) Image forming apparatus
US10209860B2 (en) Display input device capable of detecting operation performed on display portion, image processing apparatus, display input method
JP6493080B2 (en) Operation panel and image forming apparatus having the same
CN112492115B (en) Input device, control method thereof, image forming apparatus, and recording medium
JP5322768B2 (en) Image forming apparatus
JP6354743B2 (en) Image processing apparatus with operation panel responding by vibration
JP6237536B2 (en) Sheet conveying apparatus, image processing apparatus, and sheet size determination method
JP6908454B2 (en) Image forming device, control program and control method
JP6394572B2 (en) User interface device, image processing device, and notification method
US10965825B2 (en) Image reading apparatus comprising display panel which serves as operation portion and image reader, image forming apparatus, non-transitory storage medium, and control method
JP2023042652A (en) Sheet processing device and processing condition setting method
JP6508121B2 (en) Image processing apparatus, method of setting functions of image processing apparatus
JP2022077743A (en) Display unit and image formation apparatus
JP6120754B2 (en) Display input device and image forming apparatus having the same
JP2022128775A (en) Display input device, image processing apparatus, and timing setting method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180810

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180828

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180911

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180924

R150 Certificate of patent or registration of utility model

Ref document number: 6418191

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees