JP5941896B2 - 操作表示装置 - Google Patents

操作表示装置 Download PDF

Info

Publication number
JP5941896B2
JP5941896B2 JP2013243916A JP2013243916A JP5941896B2 JP 5941896 B2 JP5941896 B2 JP 5941896B2 JP 2013243916 A JP2013243916 A JP 2013243916A JP 2013243916 A JP2013243916 A JP 2013243916A JP 5941896 B2 JP5941896 B2 JP 5941896B2
Authority
JP
Japan
Prior art keywords
screen
unit
key
display
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013243916A
Other languages
English (en)
Other versions
JP2015103073A (ja
Inventor
前田 浩司
浩司 前田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Priority to JP2013243916A priority Critical patent/JP5941896B2/ja
Priority to US14/555,504 priority patent/US20150145827A1/en
Publication of JP2015103073A publication Critical patent/JP2015103073A/ja
Application granted granted Critical
Publication of JP5941896B2 publication Critical patent/JP5941896B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186Touch location disambiguation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

本発明は、例えば、画像形成装置に利用される操作表示装置に関する。
操作表示装置として、タッチパネル装置が広く利用されている。タッチパネル装置では、指先や専用ペン等の物体で、画面が表示されている表示部にタッチすることにより、操作をする。
物体が表示部に近づいたことを検出することにより、物体が表示部にタッチする前に、所定の処理をするタッチパネル装置が提案されている。例えば、アイコンのミスタッチを防止するために、指と表示部との距離が所定距離以下になれば、指が近づいているアイコンを特定し、そのアイコンを拡大する技術が提案されている(例えば、特許文献1参照)。
また、非接触で所定の処理をする装置として、車両外面に配置されたセンサーから所定範囲内にある人体の動きを非接触検出し、車両用ドアを開閉する車両用ドア開閉装置が提案されている(例えば、特許文献2参照)。
特開2006−236143号公報 特開2013−28903号公報
タッチパネル装置は、表示部にタッチして操作をするので、指に付着した油等により、表示部が汚れることが不可避的に生じる。
本発明の目的は、表示部にタッチすることなく、タッチパネル装置の操作と同様の操作ができる操作表示措置を提供することである。
上記目的を達成する本発明の第1局面に係る操作表示措置は、表示部と、画面を前記表示部に表示させる表示制御部と、前記画面上の座標平面を規定する方向を第1方向及び第2方向とし、前記画面に対する垂直方向を第3方向とし、前記画面から所定距離内にある物体の位置の変化に応じて、前記物体の位置を示す前記第1方向の座標、前記第2方向の座標、及び、前記第3方向の座標を測定する座標測定部と、ソフトキーを含む前記画面である第1の画面が前記表示部に表示されている状態で、前記第1の画面から前記所定距離内にある前記物体が、前記第3方向から見て、前記ソフトキーと重なっているか否かを、前記第1方向の座標、前記第2方向の座標及び前記第3方向の座標を用いて判定する重なり判定部と、前記重なり判定部によって前記物体が前記ソフトキーと重なっていると判定された状態で、前記第3方向の座標が変化したと判定した場合、前記ソフトキーの操作を受け付ける第1の操作受付部と、を備え、前記表示制御部は、前記第1の操作受付部によって前記ソフトキーの操作が受け付けられた場合、前記表示部に表示させる前記画面を、前記第1の画面から前記第1の画面と異なる前記画面である第2の画面に切り替える。
本発明の第1局面に係る操作表示装置では、画面から所定距離内にある物体が、第3方向(画面に対する垂直方向)から見て、ソフトキーと重なっていると判定された状態で、第3方向の座標が変化したと判定した場合、ソフトキーの操作を受け付けて、表示部に表示させる画面を切り替える。従って、本発明の第1局面に係る操作表示装置によれば、表示部にタッチすることなく、ソフトキーの操作と画面の切り替えをすることができる。
上記構成において、前記第1の操作受付部は、前記重なり判定部によって前記物体が前記ソフトキーと重なっていると判定された状態で、前記物体が前記ソフトキーに近づけられたか否かを前記第3方向の座標の変化を用いて判定し、前記物体が前記ソフトキーに近づけられたと判定した場合、前記ソフトキーの操作を受け付ける。
この構成では、物体がソフトキーと重なっていると判定された状態で、物体がソフトキーに近づけられた場合に、ソフトキーの操作が受け付けられる。
上記構成において、前記第2の画面に切り替えられた後、前記座標測定部によって測定された前記第1方向の座標、前記第2方向の座標及び前記第3方向の座標を用いて、前記第2の画面から前記所定距離内にある前記物体が、前記第3方向から見て、前記第1の画面の前記ソフトキーが表示されていた位置と重なっており、かつ、前記第2の画面から遠ざけられたと判定した場合、1つ前の画面に戻る操作を受け付ける戻り操作受付部を備え、前記表示制御部は、前記戻り操作受付部によって1つ前の画面に戻る操作が受け付けられた場合、前記表示部に表示させる前記画面を、前記第2の画面から前記第1の画面に切り替える。
この構成では、第2の画面に切り替えられた後、第2の画面から所定距離内にある物体が、第3方向から見て、ソフトキーが表示されていた位置と重なっており、かつ、第2の画面から遠ざけられたと判定された場合に、第2の画面から第1の画面に表示が切り替わる。この構成によれば、表示部にタッチすることなく、1つ前の画面に戻る操作をすることができる。
上記構成において、前記ソフトキーは、複数あり、前記複数のソフトキーのそれぞれには、予め定められた設定が割り当てられており、前記第1の操作受付部によって、前記複数のソフトキーのいずれかの操作が受け付けられた場合、操作が受け付けられたソフトキーに割り当てられた設定を受け付ける設定部と、前記重なり判定部によって前記物体が前記複数のソフトキーのいずれにも重なっていないと判定された状態で、前記第3方向の座標が変化したと判定した場合、前記画面の切り替えを受け付ける画面切替受付部と、を備え、前記表示制御部は、前記画面切替受付部によって前記画面の切り替えが受け付けられた場合、前記表示部に表示させる前記画面を、前記第1の画面から前記第2の画面に切り替える。
この構成によれば、設定の操作をすることなく、次の画面(第2の画面)に切り替えることができる。
上記構成において、前記座標測定部は、前記物体がタッチされるパネル表面を有し、前記パネル表面のタッチされた位置を検出する第1の機能を有すると共に前記第1方向の座標、前記第2方向の座標、及び、前記第3方向の座標を測定する第2の機能を有する静電容量方式のタッチパネル部であり、前記表示部は、前記画面が表示される表示パネル部と、前記表示パネル部の上に配置された前記タッチパネル部と、を含み、前記操作表示装置は、前記表示パネル部に前記第1の画面が表示された状態で、前記ソフトキー上の前記パネル表面を、前記物体がタッチすることにより、前記ソフトキーの操作を受け付ける第2の操作受付部と、前記ソフトキーの操作の受け付け、及び、前記第1の画面から前記第2の画面への切り替えについて、前記表示パネル部、前記タッチパネル部の前記第1の機能、前記表示制御部、及び、前記第2の操作受付部を用いて実行するタッチ操作モード、又は、前記表示パネル部、前記タッチパネル部の前記第2の機能、前記表示制御部、前記重なり判定部、及び、前記第1の操作受付部を用いて実行するノンタッチ操作モードの選択を受け付けるモード選択受付部と、を備える。
この構成は、ユーザーの選択により、タッチ操作モードとノンタッチ操作モードとを切り替えることができる。この構成によれば、タッチパネル部が、座標測定部の機能(第2の機能)を有するので、ノンタッチ操作モードを実行するために、座標測定部を新たに設ける必要がない。
上記目的を達成する本発明の第2局面に係る操作表示措置は、表示部と、数値表示領域を含む画面を前記表示部に表示させる表示制御部と、前記画面上の座標平面を規定する方向を第1方向及び第2方向とし、前記画面に対する垂直方向を第3方向とし、前記画面から所定距離内にある物体の位置の変化に応じて、前記物体の位置を示す前記第1方向の座標、前記第2方向の座標、及び、前記第3方向の座標を測定する座標測定部と、前記画面から前記所定距離内にある前記物体が、前記第3方向から見て、前記画面の予め定められた領域と重なっているか否かを、前記第1方向の座標、前記第2方向の座標及び前記第3方向の座標を用いて判定する重なり判定部と、前記重なり判定部によって前記物体が前記予め定められた領域と重なっていると判定された状態で、前記第3方向の座標の変化の大きさに応じて、異なる大きさの数値の入力を受け付ける第1の数値入力部と、を備え、前記表示制御部は、前記第1の数値入力部によって受け付けられた数値を、前記数値表示領域に表示させる。
本発明の第2局面に係る操作表示装置では、画面から所定距離内にある物体が、第3方向(画面に対する垂直方向)から見て、画面の予め定められた領域と重なっていると判定された状態で、第3方向の座標の変化の大きさに応じて異なる大きさの数値の入力を受け付け、その数値を数値表示領域に表示させる。従って、本発明の第2局面に係る操作表示装置によれば、表示部にタッチすることなく、数値入力の操作をすることができる。
上記構成において、前記第1の数値入力部は、前記重なり判定部によって前記物体が前記予め定められた領域と重なっていると判定された状態で、(1)前記物体を前記予め定められた領域に近づけるにしたがって、小さくなる数値の入力を受け付け、かつ、前記物体を前記予め定められた領域から遠ざけるにしたがって、大きくなる数値の入力を受け付け、又は、(2)前記物体を前記予め定められた領域に近づけるにしたがって、大きくなる数値の入力を受け付け、かつ、前記物体を前記予め定められた領域から遠ざけるにしたがって、小さくなる数値の入力を受け付ける。
第1の数値入力部の態様として、(1)の態様や(2)の態様がある。
上記構成において、前記第1の数値入力部は、前記重なり判定部によって、前記第3方向の座標が変化することなく、かつ、前記物体が前記予め定められた領域と重なっている状態から重なっていない状態に変化したと判定されたときに、前記数値表示領域に表示されている数値を、入力された数値として確定し、数値入力の受け付けを終了させる。
この構成によれば、画面から所定距離内にある物体を横移動させることにより、入力する数値が確定するので、表示部にタッチすることなく、入力する数値を確定することができる。
上記構成において、前記予め定められた領域は、前記数値表示領域である。
この構成によれば、数値入力のためのソフトキーを、画面に含める必要が無くなる。
上記構成において、前記座標測定部は、前記物体がタッチされるパネル表面を有し、前記パネル表面のタッチされた位置を検出する第1の機能を有すると共に前記第1方向の座標、前記第2方向の座標、及び、前記第3方向の座標を測定する第2の機能を有する静電容量方式のタッチパネル部であり、前記表示部は、前記画面が表示される表示パネル部と、前記表示パネル部の上に配置された前記タッチパネル部と、を含み、前記操作表示装置は、前記表示パネル部に数値入力のソフトキーを含む前記画面が表示された状態で、前記ソフトキー上の前記パネル表面を、前記物体がタッチして前記ソフトキーを操作することにより、前記数値表示領域に表示させる数値の入力を受け付ける第2の数値入力部と、前記数値表示領域に表示させる数値の入力について、前記表示パネル部、前記タッチパネル部の前記第1の機能、前記表示制御部、及び、前記第2の数値入力部を用いて実行するタッチ操作モード、又は、前記表示パネル部、前記タッチパネル部の前記第2の機能、前記表示制御部、前記重なり判定部、及び、前記第1の数値入力部を用いて実行するノンタッチ操作モードの選択を受け付けるモード選択受付部と、を備える。
この構成は、ユーザーの選択により、タッチ操作モードとノンタッチ操作モードとを切り替えることができる。この構成によれば、タッチパネル部が、座標測定部の機能を有するので、ノンタッチ操作モードを実行するために、座標測定部を新たに設ける必要がない。
本発明によれば、表示部にタッチすることなく、タッチパネル装置の操作と同様の操作ができる。
本実施形態に係る操作表示装置を備える画像形成装置の内部構造の概略を説明する説明図である。 図1に示す画像形成装置の構成を示すブロック図である。 第1実施形態に係る操作表示装置の構成を示すブロック図である。 第1実施形態に係る操作表示装置に備えられる表示部の側面図である。 パネル表面の上方にある物体までの距離を、第1の測距センサー、第2の測距センサー、第3の測距センサー、及び、第4の測距センサーのそれぞれで測定している状態を説明する説明図である。 物体位置、第1の測距センサーの位置、第2の測距センサーの位置、第3の測距センサーの位置、及び、第4の測距センサーの位置を頂点とする四角錐の平面図である。 図6に示す四角錐Qを展開した展開図である。 図7に示す展開図から切り取られた三角形Iの平面図である。 図7に示す展開図から切り取られた三角形IIの平面図である。 図6に示す四角錐Qについて、物体位置Pを通り、y軸方向に平行な方向に沿って切断し、かつ、物体位置Pを通り、x軸方向に平行な方向に沿って切断して、切り出した四角錐qの立体図である。 コピーモードにおいて、機能を選択する画面を説明する説明図である。 タッチ操作モードでの集約印刷の設定において、1ページに集約する原稿の枚数を設定する画面を説明する説明図である。 タッチ操作モードでの集約印刷の設定において、原稿のセットの向きを設定する画面を説明する説明図である。 ノンタッチ操作モードでの集約印刷の設定において、1ページに集約する原稿の枚数を設定する画面を説明する説明図である。 ノンタッチ操作モードでの集約印刷の設定において、原稿のセットの向きを設定する画面を説明する説明図である。 第2実施形態に係る操作表示装置の構成を示すブロック図である。 ノンタッチ操作モードにおいて、コピー画像の拡大/縮小を設定する画面を説明する説明図である。 タッチ操作モードにおいて、コピー画像の拡大/縮小を設定する画面を説明する説明図である。
以下、図面に基づいて本発明の実施形態を詳細に説明する。図1は、本実施形態に係る操作表示装置を備える画像形成装置1の内部構造の概略を説明する説明図である。画像形成装置1は、例えば、コピー、プリンター、スキャナー及びファクシミリの機能を有するデジタル複合機に適用することができる。画像形成装置1は、装置本体100、装置本体100の上に配置された原稿読取部200、原稿読取部200の上に配置された原稿給送部300及び装置本体100の上部前面に配置された操作部400を備える。
原稿給送部300は、自動原稿送り装置として機能し、原稿載置部301に置かれた複数枚の原稿を連続的に原稿読取部200で読み取ることができるように送ることができる。
原稿読取部200は、露光ランプ等を搭載したキャリッジ201、ガラス等の透明部材により構成された原稿台203、不図示のCCD(Charge Coupled Device)センサー及び原稿読取スリット205を備える。原稿台203に載置された原稿を読み取る場合、キャリッジ201を原稿台203の長手方向に移動させながらCCDセンサーにより原稿を読み取る。これに対して、原稿給送部300から給送された原稿を読み取る場合、キャリッジ201を原稿読取スリット205と対向する位置に移動させて、原稿給送部300から送られてきた原稿を、原稿読取スリット205を通してCCDセンサーにより読み取る。CCDセンサーは読み取った原稿を画像データとして出力する。
装置本体100は、用紙貯留部101、画像形成部103及び定着部105を備える。用紙貯留部101は、装置本体100の最下部に配置されており、用紙の束を貯留することができる用紙トレイ107を備える。用紙トレイ107に貯留された用紙の束において、最上位の用紙がピックアップローラー109の駆動により、用紙搬送路111へ向けて送出される。用紙は、用紙搬送路111を通って、画像形成部103へ搬送される。
画像形成部103は、搬送されてきた用紙にトナー像を形成する。画像形成部103は、感光体ドラム113、露光部115、現像部117及び転写部119を備える。露光部115は、画像データ(原稿読取部200から出力された画像データ、パソコンから送信された画像データ、ファクシミリ受信の画像データ等)に対応して変調された光を生成し、一様に帯電された感光体ドラム113の周面に照射する。これにより、感光体ドラム113の周面には、画像データに対応する静電潜像が形成される。この状態で感光体ドラム113の周面に現像部117からトナーを供給することにより、周面には画像データに対応するトナー像が形成される。このトナー像は、転写部119によって先ほど説明した用紙貯留部101から搬送されてきた用紙に転写される。
トナー像が転写された用紙は、定着部105に送られる。定着部105において、トナー像と用紙に熱と圧力が加えられて、トナー像は用紙に定着される。用紙はスタックトレイ121又は排紙トレイ123に排紙される。
操作部400は、操作キー部401と表示部403を備える。表示部403は、タッチパネル機能を有しており、ソフトキー等を含む画面が表示される。ユーザーは、画面を見ながらソフトキー等を操作することによって、コピー等の機能の実行に必要な設定等をする。
操作キー部401には、ハードキーからなる操作キーが設けられている。具体的には、スタートキー405、テンキー407、ストップキー409、リセットキー411、コピー、プリンター、スキャナー及びファクシミリを切り換えるための機能切換キー413等が設けられている。
スタートキー405は、コピー、ファクシミリ送信等の動作を開始させるキーである。テンキー407は、コピー部数、ファクシミリ番号等の数字を入力するキーである。ストップキー409は、コピー動作等を途中で中止させるキーである。リセットキー411は、設定された内容を初期設定状態に戻すキーである。
機能切換キー413は、コピーキー及び送信キー等を備えており、コピー機能、送信機能等を相互に切り替えるキーである。コピーキーを操作すれば、コピーの初期画面が表示部403に表示される。送信キーを操作すれば、ファクシミリ送信及びメール送信の初期画面が表示部403に表示される。
図2は、図1に示す画像形成装置1の構成を示すブロック図である。画像形成装置1は、装置本体100、原稿読取部200、原稿給送部300、操作部400、制御部500及び通信部600がバスによって相互に接続された構成を有する。装置本体100、原稿読取部200、原稿給送部300及び操作部400に関しては既に説明したので、説明を省略する。
制御部500は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)及び画像メモリー等を備える。CPUは、画像形成装置1を動作させるために必要な制御を、装置本体100等の画像形成装置1の上記構成要素に対して実行する。ROMは、画像形成装置1の動作の制御に必要なソフトウェアを記憶している。RAMは、ソフトウェアの実行時に発生するデータの一時的な記憶及びアプリケーションソフトの記憶等に利用される。画像メモリーは、画像データ(原稿読取部200から出力された画像データ、パソコンから送信された画像データ、ファクシミリ受信の画像データ等)を一時的に記憶する。
通信部600は、ファクシミリ通信部601及びネットワークI/F部603を備える。ファクシミリ通信部601は、相手先ファクシミリとの電話回線の接続を制御するNCU(Network Control Unit)及びファクシミリ通信用の信号を変復調する変復調回路を備える。ファクシミリ通信部601は、電話回線605に接続される。
ネットワークI/F部603は、LAN(Local Area Network)607に接続される。ネットワークI/F部603は、LAN607に接続されたパソコン等の端末装置との間で通信を実行するための通信インターフェイス回路である。
本実施形態には、第1実施形態と第2実施形態とがある。第1実施形態から説明する。図3は、第1実施形態に係る操作表示装置3の構成を示すブロック図である。操作表示装置3は、表示部403、第1〜第4の測距センサーS1〜S4、画面データ記憶部11、表示制御部13、座標演算部17、重なり判定部19、第1の操作受付部21、戻り操作受付部23、第2の操作受付部25、設定部27、画面切替受付部29、及び、モード選択受付部31を備える。表示部403は、平面図で示されている。図4は、表示部403の側面図である。
制御部500は、機能ブロックとして、画面データ記憶部11、表示制御部13、座標演算部17、重なり判定部19、第1の操作受付部21、戻り操作受付部23、第2の操作受付部25、設定部27、画面切替受付部29、及び、モード選択受付部31を備える。
表示部403は、表示パネル部49と、表示パネル部49の上に配置されたタッチパネル部51と、を備える。
タッチパネル部51は、指先等の物体がタッチされるパネル表面55を有し、パネル表面55のタッチされた位置を検出する装置である。パネル表面55にタッチされる物体として、指先や専用ペン等がある。タッチパネル部51の方式としては、抵抗膜方式や静電容量方式等の各種方式がある。
表示パネル部49には、画面が表示される。表示部403に表示される画面とは、タッチパネル部51を介して表示パネル部49に表示された画面である。表示パネル部49は、液晶表示パネル等により実現される。
表示部403に表示される画面上の座標平面を規定する方向を第1方向及び第2方向とし、画面に対する垂直方向を第3方向とする。本実施形態では、第1方向をx軸方向、第2方向をy軸方向、第3方向をz軸方向として説明する。
表示部403の四隅には、第1〜第4の測距センサーS1,S2,S3,S4が配置されている。第1〜第4の測距センサーS1,S2,S3,S4は、後で説明する座標測定部15を構成する。
画面データ記憶部11は、表示部403に表示される画面を示す画面データを、予め記憶している。
表示制御部13は、画面データ記憶部11から上記画面データを読み出して、画面を表示部403に表示させる制御をする。画面の一例について説明する。図11は、コピーモードにおいて、機能を選択する画面61を説明する説明図である。画面61は、用紙設定キー62、拡大/縮小キー63、コピー濃度キー64、ステープルキー65、及び、集約キー66が含まれる。これらのキーは、ソフトキーである。
用紙設定キー62は、表示部403に表示された画面61を、コピー用紙のサイズを設定する画面に切り替えるキーである。拡大/縮小キー63は、表示部403に表示された画面61を、コピーされる画像の拡大や縮小を設定する画面に切り替えるキーである。コピー濃度キー64は、表示部403に表示された画面61を、コピーされる画像の濃度を設定する画面に切り替えるキーである。ステープルキー65は、表示部403に表示された画面61を、ステープルを設定する画面に切り替えるキーである。集約キー66は、表示部403に表示された画面61を、集約印刷を設定する画面に切り替えるキーである。
図3の説明に戻る。座標演算部17及び第1〜第4の測距センサーS1,S2,S3,S4により、座標測定部15が構成される。
座標測定部15は、パネル表面55の上方にある指先等の物体について、その物体とパネル表面55との距離が所定値以下になれば、物体の位置の変化に応じて物体の位置を測定する。座標測定部15は、物体の位置を示すx座標、y座標及びz座標を測定することにより、その物体の位置を測定する。すなわち、座標測定部15は、表示部403に表示されている画面から所定距離内にある物体の位置の変化に応じて、物体の位置を示すx座標、y座標及びz座標を測定する。
図5は、パネル表面55の上方にある物体Fまでの距離を、第1の測距センサーS1、第2の測距センサーS2、第3の測距センサーS3、及び、第4の測距センサーS4のそれぞれで測定している状態を説明する説明図である。(A)は、表示部403の上方側から物体Fを見た状態を示し、(B)は、表示部403の側面側から物体Fを見た状態を示している。物体Fは、指先である。物体Fの位置である物体位置Pを示すx座標、y座標及びz座標の測定方法については、後で詳細に説明する。
図3及び図5を参照して、重なり判定部19は、ソフトキーを含む画面(第1の画面)が表示部403に表示されている状態で、画面から所定距離内にある物体Fが、z軸方向(画面に対する垂直方向)から見て、ソフトキーと重なっているか否かを、物体位置Pのx座標、y座標及びz座標を用いて判定する。ソフトキーとは、例えば、図11に示すように、画面61に含まれる各種のキー62〜66を意味する。
物体位置Pのx座標がソフトキーのx座標に含まれ、物体位置Pのy座標がソフトキーのy座標に含まれ、かつ、物体位置Pのz座標がソフトキーのz座標に含まれない場合、物体Fが、z軸方向から見て、ソフトキーと重なっていると判定することができる。
物体Fが、z軸方向から見て、ソフトキーと重なっているとは、物体Fがソフトキーと立体的に重なっていると言い換えることもできるし、物体Fがソフトキーの上方に位置すると言い換えることもできる。
第1の操作受付部21は、重なり判定部19によって物体Fがソフトキーと重なっていると判定された状態で、座標測定部15によって測定された物体位置Pのz座標が変化したと判定した場合、ソフトキーの操作を受け付ける。表示制御部13は、第1の操作受付部21によってソフトキーの操作が受け付けられた場合、表示部403に表示させる画面を切り替える(第1の画面から第1の画面と異なる画面である第2の画面に切り替える)。
第1の操作受付部21が、ソフトキーの操作を受け付ける態様として、第1の態様と第2の態様とがある。第1の態様は、画面から所定距離内にある図5に示す物体Fが、z軸方向から見て、ソフトキーと重なっている状態で、物体Fをソフトキーに近づけた場合に、ソフトキーの操作を受け付ける態様である。第2の態様は、画面から所定距離内にある物体Fが、z軸方向から見て、ソフトキーと重なっている状態で、物体をソフトキーから遠ざけた場合に、ソフトキーの操作を受け付ける態様である。
本実施形態では、第1の態様で説明する。従って、第1の操作受付部21は、重なり判定部19によって物体Fがソフトキーと重なっていると判定された状態で、物体Fがソフトキーに近づけられたか否かを物体位置Pのz座標の変化を用いて判定し、物体Fがソフトキーに近づけられたと判定した場合、ソフトキーの操作を受け付ける。
戻り操作受付部23は、画面(第2の画面)が切り替えられた後、座標測定部15によって測定された物体位置Pのx座標、y座標及びz座標を用いて、画面(第2の画面)から所定距離内にある物体Fが、z軸方向から見て、画面(第1の画面)のソフトキーが表示されていた位置と重なっており、かつ、画面(第2の画面)から遠ざけられたと判定した場合、1つ前の画面に戻る操作を受け付ける。表示制御部13は、戻り操作受付部23によって1つ前の画面に戻る操作が受け付けられた場合、表示部403に表示させる画面を切り替える(第2の画面から第1の画面に切り替える)。
第2の操作受付部25は、表示部403(表示パネル部49)にソフトキーを含む画面(第1の画面)が表示された状態で、ソフトキー上のパネル表面55を、物体Fがタッチすることにより、ソフトキーの操作を受け付ける。
設定部27は、第1の操作受付部21や第2の操作受付部25によって、複数のソフトキーのいずれかの操作が受け付けられた場合、操作が受け付けられたソフトキーに割り当てられた設定を受け付ける。
画面切替受付部29は、重なり判定部19によって物体Fが複数のソフトキーのいずれにも重なっていないと判定された状態で、物体位置Pのz座標が変化したと判定した場合、画面の切り替えを受け付ける。
モード選択受付部31は、ユーザーが操作部400(図2)を操作してタッチ操作モードを選択したとき、タッチ操作モードの選択を受け付け、ユーザーが操作部400を操作してノンタッチ操作モードを選択したとき、ノンタッチ操作モードの選択を受け付ける。
タッチ操作モードとは、ソフトキーの操作の受け付け、及び、表示部403に表示される画面の切り替え等の操作について、表示パネル部49、タッチパネル部51、表示制御部13、第2の操作受付部25及び設定部27を用いて実行するモードである。タッチ操作モードは、通常のタッチパネル装置と同様の操作モードであり、パネル表面55にタッチして操作するモードである。
ノンタッチ操作モードとは、ソフトキーの操作の受け付け、及び、表示部403に表示される画面の切り替え等の操作について、表示パネル部49、表示制御部13、座標測定部15、重なり判定部19、第1の操作受付部21、戻り操作受付部23、設定部27、及び、画面切替受付部29を用いて実行するモードである。ノンタッチ操作モードは、パネル表面55にタッチせずに操作するモードである。
物体Fの位置である物体位置Pを示すx座標、y座標及びz座標の測定方法について、詳細に説明する。
図6は、物体位置P、第1の測距センサーS1の位置、第2の測距センサーS2の位置、第3の測距センサーS3の位置、及び、第4の測距センサーS4の位置を頂点とする四角錐Qの平面図である。第1の測距センサーS1の位置を原点とする。
第1の測距センサーS1と第2の測距センサーS2とは、y座標が同じ値(=0)であり、第3の測距センサーS3と第4の測距センサーS4とは、y座標が同じ値である。第1の測距センサーS1と第4の測距センサーS4とは、x座標が同じ値(=0)であり、第2の測距センサーS2と第3の測距センサーS3とは、x座標が同じ値である。物体位置Pのx座標をx1、y座標をy1とする。
第1の測距センサーS1を用いて測定した、第1の測距センサーS1の位置から物体位置Pまでの距離を辺aとして示す。第2の測距センサーS2を用いて測定した、第2の測距センサーS2の位置から物体位置Pまでの距離を辺bとして示す。第3の測距センサーS3を用いて測定した、第3の測距センサーS3の位置から物体位置Pまでの距離を辺cとして示す。第4の測距センサーS4を用いて測定した、第4の測距センサーS4の位置から物体位置Pまでの距離を辺dとして示す。
四角錐Qが有する四つの三角形の側面を、三角形I、三角形II、三角形III、三角形IVとする。三角形Iは、物体位置P、第1の測距センサーS1の位置及び第2の測距センサーS2の位置を頂点とする三角形である。三角形Iの三辺は、辺a、辺b、第1の測距センサーS1の位置と第2の測距センサーS2の位置とを結ぶ辺eである。辺aと辺eとで規定される角度を角∠aeとする。
三角形IIは、物体位置P、第2の測距センサーS2の位置及び第3の測距センサーS3の位置を頂点とする三角形である。三角形IIの三辺は、辺b、辺c、第2の測距センサーS2の位置と第3の測距センサーS3の位置とを結ぶ辺fである。辺bと辺fとで規定される角度を角∠fbとする。
三角形IIIは、物体位置P、第3の測距センサーS3の位置及び第4の測距センサーS4の位置を頂点とする三角形である。三角形IIIの三辺は、辺c、辺d、第3の測距センサーS3の位置と第4の測距センサーS4の位置とを結ぶ辺gである。
三角形IVは、物体位置P、第4の測距センサーS4の位置及び第1の測距センサーS1の位置を頂点とする三角形である。三角形IVの三辺は、辺d、辺a、第4の測距センサーS4の位置と第1の測距センサーS1の位置とを結ぶ辺hである。
図7は、四角錐Qを展開した展開図である。三角形Iの辺aを辺a、辺bを辺bで示す。三角形IIの辺bを辺bII、辺cを辺cIIで示す。三角形IIIの辺cを辺cIII、辺dを辺dIIIで示す。三角形IVの辺dを辺dIV、辺aを辺aIVで示す。
図8は、図7に示す展開図から切り取られた三角形Iの平面図である。辺eにおいて、x座標がx1となる位置を位置Aとする。第1の測距センサーS1の位置と位置Aとを結ぶ辺を辺jとする。
余弦定理より、cos∠ae=(a +e−b )/(2×a×e)となる。cos∠ae=j/a、となるので、j=a×cos∠ae、となる。辺jの長さ、言い換えれば、物体位置Pのx座標の値であるx1は、a×cos∠ae、となる。
図9は、図7に示す展開図から切り取られた三角形IIの平面図である。辺fにおいて、y座標がy1となる位置を位置Dとする。第2の測距センサーS2の位置と位置Dとを結ぶ辺を辺rとする。
余弦定理より、cos∠fb=(bII +f−cII )/(2×bII×f)となる。cos∠fb=r/bII、となるので、r=bII×cos∠fb、となる。辺rの長さ、言い換えれば、物体位置Pのy座標の値であるy1は、bII×cos∠fb、となる。
三角形IIを使って、物体位置Pのy座標y1を求めている。しかし、sinθ+cosθ=1の公式から、sin∠aeが求まるので、図6に示す三角形Iを使っても、物体位置Pのy座標y1を求めることができる。よって、三角形Iを使って物体位置Pのx座標、y座標を求めることができ、三角形IIを使って物体位置Pのx座標、y座標を求めることができ、三角形IIIを使って物体位置Pのx座標、y座標を求めることができ、三角形IVを使って物体位置Pのx座標、y座標を求めることができる。
物体位置Pのz座標z1の求め方を説明する。図6に示す四角錐Qについて、物体位置Pを通り、y軸方向に平行な方向に沿って切断し、かつ、物体位置Pを通り、x軸方向に平行な方向に沿って切断して、切り出した四角錐qの立体図が、図10である。物体位置Pの座標は、(x1、y1、z1)である。
四角錐qが有する四つの三角形側面を、三角形V、三角形VI、三角形VII、三角形VIIIとする。三角形Vは、物体位置P、第1の測距センサーS1の位置及び位置Aを頂点とする三角形であり、図6に示す三角形Iの一部である。位置Aの座標は、(x1、0、0)である。三角形Vの三辺は、辺a、辺j、物体位置Pと位置Aとを結ぶ辺iである。
三角形VIは、物体位置P、位置A及び位置Bを頂点とする三角形である。位置Bの座標は、(x1、y1、0)である。三角形VIの三辺は、辺i、辺l、物体位置Pと位置Bとを結ぶ辺kである。
三角形VIIは、物体位置P、位置B及び位置Cを頂点とする三角形である。位置Cは、図6に示す辺h上にある。位置Cの座標は、(0、y1、0)である。三角形VIIの三辺は、辺k、物体位置Pと位置Cとを結ぶ辺m、位置Bと位置Cとを結ぶ辺nである。
三角形VIIIは、物体位置P、位置C及び第1の測距センサーS1の位置を頂点とする三角形であり、図6に示す三角形IVの一部である。三角形VIIIの三辺は、辺m、辺a、位置Cと第1の測距センサーS1の位置とを結ぶ辺oである。
tan∠ae=i/jなので、i=j×tan∠aeとなる。そして、三平方の定理(i=l+k)から、辺kの長さ、つまり、物体位置Pのz座標z1が求まる。
以上説明したように、図5に示す第1〜第4の測距センサーS1,S2,S3,S4を用いて、物体Fまでの距離をそれぞれ測定し、これらの距離を基にして、物体位置Pのx座標、y座標、z座標をそれぞれ求めることができるので、物体位置Pを測定できる。
図3に示す座標演算部17は、三角形Iを用いて物体位置Pのx座標x1を求める式とy座標y1を求める式を予め記憶している。座標演算部17は、その式、第1の測距センサーS1により測定された物体Fまでの距離(=辺a)、及び、第2の測距センサーS2により測定された物体Fまでの距離(=辺b)を用いて、物体位置Pのx座標x1、y座標y1を演算する。
座標演算部17は、三角形IIを用いて物体位置Pのx座標x1を求める式とy座標y1を求める式を予め記憶している。座標演算部17は、その式、第2の測距センサーS2により測定された物体Fまでの距離(=辺b)、及び、第3の測距センサーS3により測定された物体Fまでの距離(=辺c)を用いて、物体位置Pのx座標x1、y座標y1を演算する。
座標演算部17は、三角形IIIを用いて物体位置Pのx座標x1を求める式とy座標y1を求める式を予め記憶している。座標演算部17は、その式、第3の測距センサーS3により測定された物体Fまでの距離(=辺c)、及び、第4の測距センサーS4により測定された物体Fまでの距離(=辺d)を用いて、物体位置Pのx座標x1、y座標y1を演算する。
座標演算部17は、三角形IVを用いて物体位置Pのx座標x1を求める式とy座標y1を求める式を予め記憶している。座標演算部17は、その式、第4の測距センサーS4により測定された物体Fまでの距離(=辺d)、及び、第1の測距センサーS1により測定された物体Fまでの距離(=辺a)を用いて、物体位置Pのx座標x1、y座標y1を演算する。
以上のように、座標演算部17は、第1〜第4の測距センサーS1,S2,S3,S4で測定されたそれぞれの距離を辺a,b,c,dとし、物体位置Pを頂点とする四つの三角形I,II,III,IVのそれぞれを用いて、物体位置Pのx座標x1及びy座標y1を算出する。
四つの三角形I,II,III,IVのそれぞれを用いて算出したx座標x1が全て一致し、かつ、四つの三角形I,II,III,IVのそれぞれを用いて算出したy座標y1が全て一致する条件(一致条件)を満たす場合、物体位置Pが一点に定まる。
座標演算部17は、物体位置Pのz座標z1を求める式を、予め記憶している。座標演算部17は、一致条件を満たすと判断した場合、物体位置Pのz座標z1を求める式を用いて、z座標z1を算出する。
以上のようにして、座標測定部15は、物体位置Pのx座標、y座標及びz座標を測定する。
第1実施形態に係る操作表示装置3の動作について、図3、図5、及び、図11〜図15を用いて説明する。
操作表示装置3の動作には、タッチ操作モードの動作とノンタッチ操作モードの動作とがある。まず、タッチ操作モードの動作について、集約印刷の設定を例にして説明する。
表示制御部13は、図11に示す画面61を表示部403に表示させる制御をしている。図11は、既に説明したように、コピーモードにおいて、機能を選択する画面61を説明する説明図である。画面61に含まれる集約キー66上のパネル表面55(図5)を、物体F(図5)でタッチすると、第2の操作受付部25は、集約キー66の操作を受け付ける。これにより、表示制御部13は、表示部403に表示された画面61を、図12に示す画面68に切り替える。
図12は、タッチ操作モードでの集約印刷の設定において、1ページに集約する原稿の枚数を設定する画面68を説明する説明図である。画面68には、2in1キー69、4in1キー70、及び、戻るキー71が含まれる。
2in1キー69は、1ページに集約する原稿の枚数を2枚に設定するキーである。4in1キー70は、1ページに集約する原稿の枚数を4枚に設定するキーである。戻るキー71は、表示部403に表示されている画面68を、1つ前の画面、すなわち、図11に示す画面61に戻すキーである。
戻るキー71上のパネル表面55(図5)を、物体F(図5)でタッチすると、第2の操作受付部25は、戻るキー71の操作を受け付ける。これにより、表示制御部13は、表示部403に表示された画面68を、図11に示す画面61に切り替える。
2in1キー69(又は4in1キー70)上のパネル表面55を、物体Fでタッチすると、第2の操作受付部25は、2in1キー69(又は4in1キー70)の操作を受け付ける。2in1キー69の操作が受け付けられたときは、設定部27は2in1の設定を受け付ける。4in1キー70の操作が受け付けられたときは、設定部27は4in1の設定を受け付ける。2in1キー69(又は4in1キー70)の操作を受け付けると、表示制御部13は、表示部403に表示された画面68を、図13に示す画面73に切り替える。
図13は、タッチ操作モードでの集約印刷の設定において、原稿のセットの向きを設定する画面73を説明する説明図である。画面73には、縦向きキー74、横向きキー75、及び、戻るキー76が含まれる。
縦向きキー74は、原稿をセットする向きを縦向きに設定するキーである。横向きキー75は、原稿をセットする向きを横向きに設定するキーである。戻るキー76は、表示部403に表示されている画面73を、1つ前の画面、すなわち、図12に示す画面68に戻すキーである。
戻るキー76上のパネル表面55を、物体Fでタッチすると、第2の操作受付部25は、戻るキー76の操作を受け付ける。これにより、表示制御部13は、表示部403に表示された画面73を、図12に示す画面68に切り替える。
縦向きキー74(又は横向きキー75)上のパネル表面55を、物体Fでタッチすると、第2の操作受付部25は、縦向きキー74(又は横向きキー75)の操作を受け付ける。縦向きキー74の操作が受け付けられたとき、設定部27は、原稿をセットする向きを縦向きにする設定を受け付ける。横向きキー75の操作が受け付けられたとき、設定部27は、原稿をセットする向きを横向きにする設定を受け付ける。縦向きキー74(又は横向きキー75)の操作が受け付けられると、表示制御部13は、表示部403に表示された画面73を、不図示の次の画面(例えば、集約順序を選択する画面)に切り替える。以降は、これまでのタッチ操作モードの操作と同様の操作をして、集約印刷の設定がされる。
次に、ノンタッチ操作モードの動作について、集約印刷の設定を例にして説明する。重なり判定部19は、図11に示す画面61が表示部403に表示されている状態で、画面61から所定距離内にある図5に示す物体Fが、z軸方向から見て、集約キー66と重なっているか否かを、物体位置Pのx座標、y座標及びz座標を用いて判定する。すなわち、集約キー66の上方に、物体Fが位置しているか否かを判定する。
第1の操作受付部21は、重なり判定部19によって物体Fが集約キー66と重なっていると判定された状態で、物体Fが集約キー66に近づく方向に、物体位置Pのz座標が変化したと判定した場合、集約キー66の操作を受け付ける。すなわち、物体Fを集約キー66に近づけると、集約キー66の操作が受け付けられる。これにより、表示制御部13は、表示部403に表示された画面61(第1の画面)を、図14に示す画面78(第2の画面)に切り替える。
図14は、ノンタッチ操作モードでの集約印刷の設定において、1ページに集約する原稿の枚数を設定する画面78を説明する説明図である。画面78には、2in1キー69及び4in1キー70が含まれる。図12に示す画面68との違いは、戻るキー71を含まないことである。なお、符号66aで示す領域は、集約キー66(図11)が表示されていた位置を示す仮想領域であり、実際には、位置66aは、画面78に示されていない。
戻り操作受付部23は、画面78に切り替えられた後、座標測定部15によって測定された物体位置Pのx座標、y座標及びz座標を用いて、画面78から所定距離内にある図5に示す物体Fが、z軸方向から見て、集約キー66が表示されていた位置66aと重なっており、かつ、画面78から遠ざけられたと判定した場合、1つ前の画面(図11の画面61)に戻る操作を受け付ける。すなわち、集約キー66が表示されていた位置66aの上方にある物体Fを、z軸方向に沿って画面78から遠ざけると、1つ前の画面に戻る操作が受け付けられる。これにより、表示制御部13は、表示部403に表示された画面78を、図11に示す画面61に切り替える。
重なり判定部19は、図14に示す画面78が表示部403に表示されている状態で、画面78から所定距離内にある図5に示す物体Fが、z軸方向から見て、2in1キー69(又は4in1キー70)と重なっているか否かを、物体位置Pのx座標、y座標及びz座標を用いて判定する。すなわち、2in1キー69(又は4in1キー70)の上方に、物体Fが位置しているか否かを判定する。
第1の操作受付部21は、重なり判定部19によって物体Fが2in1キー69(又は4in1キー70)と重なっていると判定された状態で、物体Fが2in1キー69(又は4in1キー70)に近づく方向に、物体位置Pのz座標が変化したと判定した場合、2in1キー69(又は4in1キー70)の操作を受け付ける。すなわち、物体Fを2in1キー69(又は4in1キー70)に近づけると、2in1キー69(又は4in1キー70)の操作が受け付けられる。
2in1キー69の操作が受け付けられたとき、設定部27は、2in1の設定を受け付ける。4in1キー70の操作が受け付けられたとき、設定部27は、4in1の設定を受け付ける。2in1キー69(又は4in1キー70)の操作を受け付けると、表示制御部13は、表示部403に表示された画面78(第1の画面)を、図15に示す画面79(第2の画面)に切り替える。
なお、集約ページ数を設定することなく、すなわち、設定部27が集約ページ数の設定を受け付けずに、画面78から画面79に切り替えることもできる。詳しく説明すると、画面切替受付部29は、重なり判定部19によって物体Fが2in1キー69及び4in1キー70のいずれにも重なっていないと判定された状態で、物体Fが画面78に近づく方向に、物体位置Pのz座標が変化したと判定した場合、画面の切り替えを受け付ける。これにより、表示制御部13は、表示部403に表示された画面78を、画面79に切り替える。従って、設定の操作をすることなく、次の画面(第2の画面)に切り替えることもできる。
図15は、ノンタッチ操作モードでの集約印刷の設定において、原稿のセットの向きを設定する画面79を説明する説明図である。画面79には、縦向きキー74及び横向きキー75が含まれる。図13に示す画面73との違いは、戻るキー76を含まないことである。なお、符号69aで示す領域は、2in1キー69(図14)が表示されていた位置を示す仮想領域である。符号70aで示す領域は、4in1キー70(図14)が表示されていた位置を示す仮想領域である。実際には、位置69a及び位置70aは、画面79に示されていない。
戻り操作受付部23は、画面79に切り替えられた後、座標測定部15によって測定された物体位置Pのx座標、y座標及びz座標を用いて、画面79から所定距離内にある図5に示す物体Fが、z軸方向から見て、2in1キー69が表示されていた位置69a(又は4in1キー70が表示されていた位置70a)と重なっており、かつ、画面79から遠ざけられたと判定した場合、1つ前の画面(図14の画面78)に戻る操作を受け付ける。すなわち、2in1キー69が表示されていた位置69a(又は4in1キー70が表示されていた位置70a)の上方にある物体Fを、z軸方向に沿って画面78から遠ざけると、1つ前の画面に戻る操作が受け付けられる。これにより、表示制御部13は、表示部403に表示された画面79を、図14に示す画面78に切り替える。
重なり判定部19は、図15に示す画面79が表示部403に表示されている状態で、画面79から所定距離内にある図5に示す物体Fが、z軸方向から見て、縦向きキー74(又は横向きキー75)と重なっているか否かを、物体位置Pのx座標、y座標及びz座標を用いて判定する。すなわち、縦向きキー74(又は横向きキー75)の上方に、物体Fが位置しているか否かを判定する。
第1の操作受付部21は、重なり判定部19によって物体Fが縦向きキー74(又は横向きキー75)と重なっていると判定された状態で、縦向きキー74(又は横向きキー75)に近づく方向に、物体位置Pのz座標が変化したと判定した場合、縦向きキー74(又は横向きキー75)の操作を受け付ける。すなわち、物体Fを縦向きキー74(又は横向きキー75)に近づけると、縦向きキー74(又は横向きキー75)の操作が受け付けられる。
縦向きキー74の操作が受け付けられたとき、設定部27は、原稿をセットする向きを縦向きに設定することを受け付ける。横向きキー75の操作が受け付けられたとき、設定部27は、原稿をセットする向きを横向きに設定することを受け付ける。縦向きキー74(又は横向きキー75)の操作が受け付けられると、表示制御部13は、表示部403に表示された画面79を、不図示の画面(例えば、集約順序を選択する画面)に切り替える。以降は、これまでのノンタッチ操作モードの操作と同様の操作をして、集約印刷の設定がされる。
第1実施形態の主な効果を説明する。ノンタッチ操作モードで説明したように、第1実施形態に係る操作表示装置3では、画面(例えば、図11に示す画面61)から所定距離内にある図5に示す物体Fが、z軸方向から見て、ソフトキー(例えば、集約キー66)と重なっていると判定された状態で、物体位置Pのz座標が変化したと判定した場合、ソフトキーの操作を受け付けて、表示部403に表示させる画面(例えば、図14に示す画面78)を切り替える。従って、第1実施形態に係る操作表示装置3によれば、表示部403にタッチすることなく、ソフトキーの操作と画面の切り替えをすることができる。これにより、機能を設定する際に、設定画面の数が多い場合に、操作性を向上させることができる。
また、第1実施形態に係る操作表示装置3では、第2の画面(例えば、図14に示す画面78)に切り替えられた後、第2の画面から所定距離内にある物体Fが、z軸方向から見て、ソフトキーが表示されていた位置(例えば、図14に示す位置66a)と重なっており、かつ、第2の画面から遠ざけられたと判定された場合に、第2の画面から第1の画面(例えば、図11に示す画面61)に表示が切り替わる。従って、第1実施形態に係る操作表示装置3によれば、表示部403にタッチすることなく、1つ前の画面に戻る操作をすることができる。
次に、第2実施形態に係る操作表示装置5について、第1実施形態に係る操作表示装置3との相違を中心にして説明する。図16は、第2実施形態に係る操作表示装置5の構成を示すブロック図である。操作表示装置5は、図3に示す操作表示装置3に備えられる重なり判定部19、第1の操作受付部21、戻り操作受付部23、第2の操作受付部25、設定部27、画面切替受付部29、及び、モード選択受付部31の替わりに、重なり判定部33、第1の数値入力部35、第2の数値入力部37、及び、モード選択受付部39を備える。
重なり判定部33は、表示部403に表示されている画面から所定距離内にある図5に示す物体Fが、z軸方向(画面に対する垂直方向)から見て、画面の予め定められた領域と重なっているか否かを、物体位置Pのx座標、y座標及びz座標を用いて判定する。
予め定められた領域について説明する。図17は、ノンタッチ操作モードにおいて、コピー画像の拡大/縮小を設定する画面81を説明する説明図である。数値表示領域82には、拡大/縮小の倍率の数値が表示される。数値表示領域82は、予め定められた領域の例である。
物体Fのx座標が予め定められた領域のx座標に含まれ、物体Fのy座標が予め定められた領域のy座標に含まれ、かつ、物体Fのz座標が予め定められた領域のz座標に含まれない場合、物体Fが、z軸方向から見て、予め定められた領域と重なっていると判定することができる。
物体Fが、z軸方向から見て、予め定められた領域と重なっているとは、物体Fが予め定められた領域と立体的に重なっていると言い換えることもできるし、物体Fが予め定められた領域の上方に位置すると言い換えることもできる。
第1の数値入力部35は、重なり判定部33によって物体Fが予め定められた領域と重なっていると判定された状態で、z座標の変化の大きさに応じて、異なる大きさの数値の入力を受け付ける。
第1の数値入力部35には、2つの態様がある。第1の態様は、重なり判定部33によって物体Fが予め定められた領域と重なっていると判定された状態で、物体Fを予め定められた領域に近づけるにしたがって、小さくなる数値の入力を受け付け、かつ、物体Fを予め定められた領域から遠ざけるにしたがって、大きくなる数値の入力を受け付ける態様である。第2の態様は、重なり判定部33によって物体Fが予め定められた領域と重なっていると判定された状態で、物体Fを予め定められた領域に近づけるにしたがって、大きくなる数値の入力を受け付け、かつ、物体Fを予め定められた領域から遠ざけるにしたがって、小さくなる数値の入力を受け付ける態様である。本実施形態では、第1の態様で説明する。
表示制御部13は、第1の数値入力部35によって受け付けられた数値を、数値表示領域82に表示させる。
第1の数値入力部35は、重なり判定部33によって、図5に示す物体位置Pのz座標が変化することなく、かつ、物体Fが予め定められた領域と重なっている状態から重なっていない状態に変化したと判定されたときに、数値表示領域82に表示されている数値を、入力された数値として確定し、数値入力の受け付けを終了させる。
第2の数値入力部37には、表示部403(表示パネル部49)に数値入力のソフトキーを含む画面が表示された状態で、ソフトキー上のパネル表面55を、図5に示す物体Fがタッチしてソフトキーを操作することにより、数値表示領域82に表示させる数値の入力を受け付ける。
数値入力のソフトキーについて説明する。図18は、タッチ操作モードにおいて、コピー画像の拡大/縮小を設定する画面84を説明する説明図である。図17に示す画面81との違いは、マイナスキー85とプラスキー86とを含む点である。マイナスキー85上のパネル表面55を、図5に示す物体Fでタッチすると、数値表示領域82に表示されている数値が小さくなる。プラスキー86上のパネル表面55を、物体Fでタッチすると、数値表示領域82に表示されている数値が大きくなる。マイナスキー85とプラスキー86とは、数値入力のソフトキーの例である。
モード選択受付部39は、図3に示すモード選択受付部31と同様に、ユーザーが操作部400を操作してタッチ操作モードを選択したとき、タッチ操作モードを選択し、ユーザーが操作部400を操作してノンタッチ操作モードを選択したとき、ノンタッチ操作モードを選択する。
タッチ操作モードとは、数値表示領域82に表示させる数値の入力について、表示パネル部49、タッチパネル部51、表示制御部13、及び、第2の数値入力部37を用いて実行するモードである。タッチ操作モードは、通常のタッチパネル装置と同様の操作モードであり、パネル表面55にタッチして操作するモードである。
ノンタッチ操作モードとは、数値表示領域82に表示させる数値の入力について、表示パネル部49、表示制御部13、座標測定部15、重なり判定部33、及び、第1の数値入力部35を用いて実行するモードである。ノンタッチ操作モードは、パネル表面55にタッチせずに操作するモードである。
第2実施形態に係る操作表示装置5の動作について、図5、図11、図16、図17及び図18を用いて説明する。操作表示装置5の動作には、タッチ操作モードの動作とノンタッチ操作モードの動作とがある。まず、タッチ操作モードの動作について、コピー画像の拡大/縮小の数値入力を例にして説明する。
表示制御部13は、図11に示す画面61を表示部403に表示させる制御をしている。画面61に含まれる拡大/縮小キー63上のパネル表面55を、図5に示す物体Fでタッチすると、拡大/縮小キー63の操作が受け付けられる。これにより、表示制御部13は、表示部403に表示された画面61を、図18に示す画面84に切り替える。
マイナスキー85上のパネル表面55を、物体Fでタッチすると、第2の数値入力部37は、数値が、「100」から1つずつ小さくなる数値入力を受け付ける。プラスキー86上のパネル表面55を、物体Fでタッチすると、第2の数値入力部37は、数値が、「100」から1つずつ大きくなる数値入力を受け付ける。
表示制御部13は、第2の数値入力部37に入力された数値を、数値表示領域82に表示させる。
次に、ノンタッチ操作モードの動作について、コピー画像の拡大/縮小の数値入力を例にして説明する。重なり判定部33は、図11に示す画面61が表示部403に表示されている状態で、画面61から所定距離内にある図5に示す物体Fが、z軸方向から見て、拡大/縮小キー63と重なっているか否かを、物体位置Pのx座標、y座標及びz座標を用いて判定する。すなわち、拡大/縮小キー63の上方に、物体Fが位置しているか否かを判定する。
重なり判定部33によって物体Fが拡大/縮小キー63と重なっていると判定された状態で、第1の数値入力部35は、物体Fが拡大/縮小キー63に近づく方向に、物体位置Pのz座標が変化したと判定した場合、拡大/縮小キー63の操作を受け付ける。すなわち、物体Fを拡大/縮小キー63に近づけると、拡大/縮小キー63の操作が受け付けられる。これにより、表示制御部13は、表示部403に表示された画面61を、図17に示す画面81に切り替える。
第1の数値入力部35は、重なり判定部33によって図5に示す物体Fが数値表示領域82(予め定められた領域)と重なっていると判定された状態で、物体Fを数値表示領域82に近づけることによる物体位置Pのz座標の変化に応じて、数値が小さくなる入力を受け付ける。すなわち、物体Fを数値表示領域82に近づけることにより、入力される数値が「99」、「98」、「97」・・・と徐々に小さくなる。
第1の数値入力部35は、重なり判定部33によって物体Fが数値表示領域82と重なっていると判定された状態で、物体Fを数値表示領域82から遠ざけることによる物体位置Pのz座標の変化に応じて、数値が大きくなる入力を受け付ける。すなわち、物体Fから数値表示領域82から遠ざかることにより、入力される数値が「101」、「102」、「103」・・・と徐々に大きくなる。
表示制御部13は、第1の数値入力部35に入力された数値を、数値表示領域82に表示させる。
このように、第2実施形態に係る操作表示装置5では、図17に示す画面81から所定距離内にある図5に示す物体Fが、z軸方向から見て、画面81の数値表示領域82(予め定められた領域)と重なっていると判定された状態で、物体位置Pのz座標の変化の大きさに応じて異なる大きさの数値の入力を受け付け、その数値を数値表示領域82に表示させる。従って、第2実施形態に係る操作表示装置5によれば、表示部403にタッチすることなく、数値入力の操作をすることができる。これにより、数値入力において、操作性を向上させることができる。
また、第2実施形態に係る操作表示装置5では、数値表示領域82を予め定められた領域にしている。従って、数値入力のためのソフトキー(例えば、図18に示すマイナスキー85とプラスキー86)を、画面81に含める必要が無くなる。
第1の数値入力部35は、重なり判定部33によって、図5に示す物体位置Pのz座標が変化することなく、かつ、物体Fが数値表示領域82と重なっている状態から重なっていない状態に変化したと判定されたときに、数値表示領域82に表示されている数値を、入力された数値として確定し、数値入力の受け付けを終了させる。すなわち、物体Fが横方向に移動されると、第1の数値入力部35は、数値入力の操作を終了して、入力された数値を確定する。
従って、第2実施形態に係る操作表示装置5によれば、画面81から所定距離内にある物体Fを横移動させることにより、入力する数値が確定するので、表示部403にタッチすることなく、入力する数値を確定することができる。
以上説明したように、第1実施形態及び第2実施形態によれば、表示部403にタッチすることなく、タッチパネル装置の操作と同様の操作ができる。このため、以下の場合に有効である。
(1)手や指が油等で汚れている場合
(2)手や指に障害があり、手や指を動かせる範囲が狭いので画面にスムーズにタッチできない場合
(3)手袋の指が入る箇所が指に比べて大きく、ソフトキーにタッチするとその箇所が変形して隣りのソフトキーを間違ってタッチする場合
第1実施形態及び第2実施形態の変形例について説明する。第1実施形態及び第2実施形態では、図3及び図16に示すように、座標測定部15が設けられている。第1実施形態及び第2実施形態の変形例では、座標測定部15の機能を有するタッチパネル部51を用いる。すなわち、タッチパネル部51は、物体Fがタッチされるパネル表面55を有し、パネル表面55のタッチされた位置を検出する第1の機能を有すると共に物体位置Pのx座標、y座標、及び、z座標を測定する第2の機能を有する静電容量方式のタッチパネル部51である。第1実施形態及び第2実施形態の変形例では、パネル表面55上のx座標及びy座標に加えて、パネル表面55に対する垂直方向であるz座標を検出できるタッチパネル部51が用いられる。このようなタッチパネル部51は、静電容量方式で実現可能であることは公知である。
第1実施形態の変形例において、図3を参照して、タッチ操作モードは、表示パネル部49、タッチパネル部51の第1の機能、表示制御部13、第2の操作受付部25、及び、設定部27を用いて実行される。ノンタッチ操作モードは、表示パネル部49、タッチパネル部51の第2の機能、表示制御部13、重なり判定部19、第1の操作受付部21、戻り操作受付部23、設定部27、及び、画面切替受付部29を用いて実行される。
第2実施形態の変形例において、図16を参照して、タッチ操作モードは、表示パネル部49、タッチパネル部51の第1の機能、表示制御部13、及び、第2の数値入力部37を用いて実行される。ノンタッチ操作モードは、表示パネル部49、タッチパネル部51の第2の機能、表示制御部13、重なり判定部33、及び、第1の数値入力部35を用いて実行される。
第1実施形態及び第2実施形態の変形例によれば、タッチパネル部51が、座標測定部15の機能(第2の機能)を有するので、ノンタッチ操作モードを実行するために、座標測定部15を新たに設ける必要がない。
3,5 操作表示装置
15 座標測定部
49 表示パネル部
51 タッチパネル部
55 パネル表面
66 集約キー
66a 集約キーが表示されていた位置
69 2in1キー
69a 2in1キーが表示されていた位置
70 4in1キー
70a 4in1キーが表示されていた位置
82 数値表示領域(予め定められた領域の具体例)
403 表示部
F 物体
P 物体位置

Claims (4)

  1. 表示部と、
    画面を前記表示部に表示させる表示制御部と、
    前記画面上の座標平面を規定する方向を第1方向及び第2方向とし、前記画面に対する垂直方向を第3方向とし、前記表示部の四隅に配置された第1の測距センサー、第2の測距センサー、第3の測距センサー及び第4の測距センサーを含み、前記画面から所定距離内にある物体の位置の変化に応じて、前記物体の位置を示す前記第1方向の座標、前記第2方向の座標、及び、前記第3方向の座標を、前記第1の測距センサー、前記第2の測距センサー、前記第3の測距センサー及び前記第4の測距センサーを用いて測定する座標測定部と、
    ソフトキーを含む前記画面である第1の画面が前記表示部に表示されている状態で、前記第1の画面から前記所定距離内にある前記物体が、前記第3方向から見て、前記ソフトキーと重なっているか否かを、前記第1方向の座標、前記第2方向の座標及び前記第3方向の座標を用いて判定する重なり判定部と、
    前記重なり判定部によって前記物体が前記ソフトキーと重なっていると判定された状態で、前記第3方向の座標が変化したと判定した場合、前記ソフトキーの操作を受け付ける第1の操作受付部と、を備え、
    前記表示制御部は、前記第1の操作受付部によって前記ソフトキーの操作が受け付けられた場合、前記表示部に表示させる前記画面を、前記第1の画面から前記第1の画面と異なる前記画面である第2の画面に切り替える操作表示装置であって、
    前記第1の操作受付部は、前記重なり判定部によって前記物体が前記ソフトキーと重なっていると判定された状態で、前記物体が前記ソフトキーに近づけられたか否かを前記第3方向の座標の変化を用いて判定し、前記物体が前記ソフトキーに近づけられたと判定した場合、前記ソフトキーの操作を受け付け、
    前記操作表示装置は、さらに、
    前記第2の画面に切り替えられた後、前記座標測定部によって測定された前記第1方向の座標、前記第2方向の座標及び前記第3方向の座標を用いて、前記第2の画面から前記所定距離内にある前記物体が、前記第3方向から見て、前記第1の画面の前記ソフトキーが表示されていた位置と重なっており、かつ、前記第2の画面から遠ざけられたと判定した場合、1つ前の画面に戻る操作を受け付ける戻り操作受付部を備え、
    前記表示制御部は、前記戻り操作受付部によって1つ前の画面に戻る操作が受け付けられた場合、前記表示部に表示させる前記画面を、前記第2の画面から前記第1の画面に切り替える操作表示装置。
  2. 前記ソフトキーは、複数あり、前記複数のソフトキーのそれぞれには、予め定められた設定が割り当てられており、前記第1の操作受付部によって、前記複数のソフトキーのいずれかの操作が受け付けられた場合、操作が受け付けられたソフトキーに割り当てられた設定を受け付ける設定部と、
    前記重なり判定部によって前記物体が前記複数のソフトキーのいずれにも重なっていないと判定された状態で、前記第3方向の座標が変化したと判定した場合、前記ソフトキーの操作を行うことなく、前記画面の切り替えを受け付ける画面切替受付部と、を備え、
    前記表示制御部は、前記画面切替受付部によって前記画面の切り替えが受け付けられた場合、前記表示部に表示させる前記画面を、前記第1の画面において、所定の設定の操作がされることなく、前記第1の画面から前記第2の画面に切り替える請求項1に記載の操作表示装置。
  3. 前記座標測定部は、前記物体がタッチされるパネル表面を有し、前記パネル表面のタッチされた位置を検出する第1の機能を有すると共に前記第1方向の座標、前記第2方向の座標、及び、前記第3方向の座標を測定する第2の機能を有する静電容量方式のタッチパネル部であり、
    前記表示部は、前記画面が表示される表示パネル部と、前記表示パネル部の上に配置された前記タッチパネル部と、を含み、
    前記操作表示装置は、
    前記表示パネル部に前記第1の画面が表示された状態で、前記ソフトキー上の前記パネル表面を、前記物体がタッチすることにより、前記ソフトキーの操作を受け付ける第2の操作受付部と、
    前記ソフトキーの操作の受け付け、及び、前記第1の画面から前記第2の画面への切り替えについて、前記表示パネル部、前記タッチパネル部の前記第1の機能、前記表示制御部、及び、前記第2の操作受付部を用いて実行するタッチ操作モード、又は、前記表示パネル部、前記タッチパネル部の前記第2の機能、前記表示制御部、前記重なり判定部、及び、前記第1の操作受付部を用いて実行するノンタッチ操作モードの選択を受け付けるモード選択受付部と、を備える請求項1又は2に記載の操作表示装置。
  4. 前記第1の画面は、集約印刷の機能を選択できる画面であり、前記第2の画面は、前記集約印刷において、1ページに集約する原稿の枚数を設定できる画面である請求項1又は3に記載の操作表示装置。
JP2013243916A 2013-11-26 2013-11-26 操作表示装置 Expired - Fee Related JP5941896B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013243916A JP5941896B2 (ja) 2013-11-26 2013-11-26 操作表示装置
US14/555,504 US20150145827A1 (en) 2013-11-26 2014-11-26 Operation Display Device That Ensures Operation without Touching Display Unit

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013243916A JP5941896B2 (ja) 2013-11-26 2013-11-26 操作表示装置

Publications (2)

Publication Number Publication Date
JP2015103073A JP2015103073A (ja) 2015-06-04
JP5941896B2 true JP5941896B2 (ja) 2016-06-29

Family

ID=53182249

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013243916A Expired - Fee Related JP5941896B2 (ja) 2013-11-26 2013-11-26 操作表示装置

Country Status (2)

Country Link
US (1) US20150145827A1 (ja)
JP (1) JP5941896B2 (ja)

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6501515B1 (en) * 1998-10-13 2002-12-31 Sony Corporation Remote control system
JP2004318637A (ja) * 2003-04-18 2004-11-11 Osk:Kk ペン入力システム及びペン入力方法
JP2008210348A (ja) * 2007-02-28 2008-09-11 Univ Of Tokyo 画像表示装置
JP2009116583A (ja) * 2007-11-06 2009-05-28 Ricoh Co Ltd 入力制御装置および入力制御方法
JP2010026564A (ja) * 2008-07-15 2010-02-04 Seiko Epson Corp 表示装置及びプログラム
WO2011011009A1 (en) * 2009-07-23 2011-01-27 Hewlett-Packard Development Company, L.P. Display with an optical sensor
JP2011253468A (ja) * 2010-06-03 2011-12-15 Aisin Aw Co Ltd 表示装置、表示方法、及び表示プログラム
JP2012032852A (ja) * 2010-07-28 2012-02-16 Sony Corp 情報処理装置、情報処理方法およびコンピュータプログラム
JP2012033104A (ja) * 2010-08-02 2012-02-16 Olympus Imaging Corp 表示装置及び撮像装置
US9098138B2 (en) * 2010-08-27 2015-08-04 Apple Inc. Concurrent signal detection for touch and hover sensing
WO2013135286A1 (en) * 2012-03-14 2013-09-19 Nokia Corporation Touch screen hover input handling
US8654076B2 (en) * 2012-03-15 2014-02-18 Nokia Corporation Touch screen hover input handling
JP2013200792A (ja) * 2012-03-26 2013-10-03 Sharp Corp 端末装置、および、制御方法
US20150332107A1 (en) * 2012-12-24 2015-11-19 Nokia Technologies Oy An apparatus and associated methods
US20140267130A1 (en) * 2013-03-13 2014-09-18 Microsoft Corporation Hover gestures for touch-enabled devices
US20140282269A1 (en) * 2013-03-13 2014-09-18 Amazon Technologies, Inc. Non-occluded display for hover interactions

Also Published As

Publication number Publication date
JP2015103073A (ja) 2015-06-04
US20150145827A1 (en) 2015-05-28

Similar Documents

Publication Publication Date Title
JP5887310B2 (ja) 表示操作装置
US8462378B2 (en) Image forming apparatus for producing plural images on a single sheet with a user selected integration pattern
JP5761526B2 (ja) 操作表示装置
EP2650769B1 (en) Display input device and image forming apparatus including the same
JP5639111B2 (ja) 情報処理装置及び画像形成装置
JP5945926B2 (ja) 操作表示装置
JP2008021094A (ja) 操作装置及び画像形成装置
JP6660084B2 (ja) タッチパネル装置及び画像表示方法
JP5941896B2 (ja) 操作表示装置
KR20170063375A (ko) 정보 처리 장치, 정보 처리 장치의 제어 방법 및 저장 매체
JP5927342B2 (ja) 表示装置及び画像形成装置
JP6304071B2 (ja) 画像処理装置
JP6221622B2 (ja) タッチパネル装置および画像形成装置
JP6014558B2 (ja) 表示装置
US9086758B2 (en) Display input device and image forming apparatus
JP6190925B2 (ja) 表示装置
JP6606591B2 (ja) タッチパネル装置及び画像表示方法
JP5860838B2 (ja) 表示装置、電子機器、及び画像形成装置
US20160266681A1 (en) Display input device and method of controlling display input device
JP6299883B2 (ja) 表示装置、画像形成装置、及び表示方法
JP2022169314A (ja) 画像形成装置
JP5858582B2 (ja) 表示入力装置および画像形成装置
JP2016042393A (ja) 操作表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150925

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160408

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160426

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160523

R150 Certificate of patent or registration of utility model

Ref document number: 5941896

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees