JP2015191241A - Electronic apparatus and operation support program - Google Patents
Electronic apparatus and operation support program Download PDFInfo
- Publication number
- JP2015191241A JP2015191241A JP2014065514A JP2014065514A JP2015191241A JP 2015191241 A JP2015191241 A JP 2015191241A JP 2014065514 A JP2014065514 A JP 2014065514A JP 2014065514 A JP2014065514 A JP 2014065514A JP 2015191241 A JP2015191241 A JP 2015191241A
- Authority
- JP
- Japan
- Prior art keywords
- operation key
- line
- user
- sight
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、ユーザーの視線を用いて操作可能な電子機器及び操作支援プログラムに関する。 The present invention relates to an electronic device that can be operated using a user's line of sight and an operation support program.
近年、電子機器の操作において、カメラでユーザーの視線を検出し、視線を用いて操作する技術が提案されている(例えば、特許文献1を参照)。特許文献1には、画面上に表示された文字列のうち、ユーザーの視線の位置にある文字を入力対象の文字として強調表示するとともに、決定ボタンが押されたときにユーザーの視線の位置にある文字を入力する技術が開示されている。
2. Description of the Related Art In recent years, a technique for detecting a user's line of sight with a camera and operating using the line of sight has been proposed (see, for example, Patent Document 1).
しかしながら、特許文献1の技術では、ユーザーが決定ボタンを押す際に、決定ボタンの位置を確認して、ユーザーの視線が入力対象の文字から外れてしまい、誤入力しやすいという問題があった。特に、決定ボタンがソフトウェアキーの場合に、入力対象の文字から視線が外れやすいという問題があった。
However, the technique of
本発明は上記課題に鑑みてなされたものであり、上記課題を解決することができる技術を提供することを目的とする。 This invention is made | formed in view of the said subject, and it aims at providing the technique which can solve the said subject.
本発明の電子機器は、表示面上のタッチを検出するタッチパネルと、ユーザーの視線が向けられた操作キーを検出する視線検出部と、前記表示面上のいずれの位置をタッチされた場合でも、前記視線検出部で検出された前記操作キーの確定操作がされたものとして動作制御する制御部とを備えたことを特徴とする。
また、前記視線検出部で検出された操作キーを強調表示させる強調処理部を備えてもよい。
本発明の操作支援プログラムは、電子機器に、表示面上のタッチを検出するタッチ検出ステップと、ユーザーの視線が向けられた操作キーを検出する視線検出ステップと、前記表示面上のいずれの位置がタッチされた場合でも、前記視線検出ステップで検出された前記操作キーの確定操作がされたものとして動作制御する制御ステップとを実行させることを特徴とする。
In the electronic device of the present invention, a touch panel that detects a touch on the display surface, a line-of-sight detection unit that detects an operation key to which the user's line of sight is directed, and any position on the display surface is touched, A control unit that controls the operation of the operation key detected by the line-of-sight detection unit as being confirmed.
Moreover, you may provide the emphasis process part which highlights the operation key detected by the said gaze detection part.
The operation support program of the present invention includes a touch detection step for detecting a touch on a display surface on an electronic device, a line-of-sight detection step for detecting an operation key to which a user's line of sight is directed, and any position on the display surface. Even when touched, the control step is executed to control the operation as if the operation key confirmation operation detected in the visual line detection step was performed.
本発明によれば、操作対象の操作キーから視線を外さずに、簡単に操作キーの確定操作を行うことができる。 According to the present invention, the operation key can be easily confirmed without removing the line of sight from the operation key to be operated.
以下、図を参照して本発明の実施形態を詳細に説明する。なお、以下の実施形態において、同様の機能を示す構成には、同一の符号を付してある。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. Note that, in the following embodiments, the same reference numerals are given to configurations showing similar functions.
図1に示すように、電子機器の一例である画像形成装置100は、操作パネル10と視線検出部11と強調処理部12と通信部13と制御部14と記憶部15と原稿読取部16と画像処理部17と印刷部18とを備えている。
As shown in FIG. 1, an
操作パネル10は、タッチパネルと操作ボタンとを備えている。タッチパネルは、各種操作キーや画像形成状況を表示する表示部の表面に透明の感圧センサーが設けられており、表示手段及び入力手段として機能する。タッチパネルは、表示面へのタッチ操作を検知して、タッチ操作が検知された位置に対応する信号を出力することで、表示部に表示した操作キーへの操作を受け付ける。なお、タッチパネルは、単にタッチされたことを検出して、その旨の信号を出力するようにしてもよい。操作ボタンは、印刷枚数等の数値を入力するためのテンキー、設定情報を初期化させる指示を入力するためのリセットキー、複写動作を停止させるためのストップキー、印刷動作を開始させる出力指示を入力するためのスタートキー等の各種操作キーを備えている。
The
視線検出部11は、タッチパネルに対するユーザーの視線の位置に基づいて、ユーザーに注視された操作キー(ユーザーの視線が向けられた操作キー)を検出する機能を有する。例えば、視線検出部11は、カメラを備えてもよく、カメラで撮像した画像データからユーザーの目を検出し、タッチパネルに対するユーザーの視線の位置に基づいて、ユーザーに注視された操作キーを検出してもよい。
The line-of-
強調処理部12は、視線検出部11で検出された操作キーを強調表示させる機能を有する。例えば、強調処理部12は、操作キーの色を変えたり、操作キーを点滅させたり、操作キーの文字を反転させたり、操作キーの文字のフォントを変えたりして、強調することができる。また、タッチパネル上の視線検出部11で検出された操作キー以外の領域を色の変更などにより目立たなくして、相対的に強調表示してもよい。
The
通信部13は、LAN(Local Area Network)等のネットワークを介して、外部端末と各種データを送受信する機能を有する。 The communication unit 13 has a function of transmitting / receiving various data to / from an external terminal via a network such as a LAN (Local Area Network).
記憶部15は、半導体メモリーやHDD(Hard Disk Drive)等の記憶手段であり、原稿読取部16によって読み取られた画像データや、通信部13を介して受信された画像データが蓄積される記憶手段である。
The
原稿読取部16は、図示しない原稿給紙装置により給紙されてきた原稿や、ユーザーによってプラテンガラスに載置された原稿に対して光を照射し、その反射光等を受光して原稿画像を読み取って画像データを出力するスキャナーである。
The
画像処理部17は、画像データに対して画像処理を行う手段である。画像処理部17では、例えば、拡大縮小処理や、濃度調整、階調調整等の画像改善処理が行われる。 The image processing unit 17 is a unit that performs image processing on image data. In the image processing unit 17, for example, image improvement processing such as enlargement / reduction processing, density adjustment, and gradation adjustment is performed.
印刷部18は、画像データを印刷する印刷手段である。印刷部18は、例えば、記憶部15から読み出した画像データに基づき感光体ドラムの表面に潜像を形成し、トナーによってその潜像をトナー像とする画像形成を行い、図示しない給紙部から搬送されてきた記録紙に感光体ドラムのトナー像を転写させ、そのトナー像を記録紙に定着させて排紙する。
The
制御部14は、操作パネル10、視線検出部11、強調処理部12、通信部13、記憶部15、原稿読取部16、画像処理部17及び印刷部18にそれぞれ接続され、操作パネル10から入力された指示情報に応じて画像形成装置100全体の動作制御を実行する。制御部14は、ROM(Read Only Memory)、RAM(Random Access Memory)等を備えたマイクロコンピュータ等の情報処理部である。ROMには画像形成装置100の動作制御を行うための制御プログラムが記憶されている。制御プログラムには、本実施形態のタッチパネル111に対する視線を用いた操作処理を実行するための操作支援プログラムが含まれている。制御部14は、ROMに記憶されている制御プログラムを読み出し、制御プログラムをRAMに展開させることで、操作パネル10から入力された指示情報に応じて装置全体を制御する。なお、制御プログラムは、不図示のネットワーク又は不図示のコンピューター読取可能な記録媒体を介してROMに記憶されてもよい。
The
次に、図2を参照して、タッチパネルに対する視線を用いた操作処理の概要について説明する。図2に示すように、操作パネル10には、タッチパネル111と操作ボタン112が配置されている。
Next, with reference to FIG. 2, an outline of operation processing using a line of sight with respect to the touch panel will be described. As shown in FIG. 2, a
図2(a)に示すように、ユーザーがタッチパネル111を見ると、視線検出部11により、カメラで撮像した画像データからユーザーの目83が検出され、ユーザーの視線とタッチパネル111との交点である注視点80a(タッチパネル111に対するユーザーの視線の位置)が算出される。視線検出部11は、算出した注視点80aの近傍にある操作キー81aをユーザーに注視された操作キーとして検出する。視線検出部11により検出された操作キー81aは、強調処理部12により強調表示される。そのため、タッチパネル111に多数のアイコンが表示され、どのアイコンが操作キーであるか判別しにくい場合であっても、ユーザーがタッチパネル111の表示面に沿って視線を移動させることで、操作可能な操作キーを判別することができる。なお、図2では、ユーザーに注視された操作キー81aを白黒反転させて強調表示している。
As shown in FIG. 2A, when the user views the
操作キーを操作する場合には、ユーザーは操作したい操作キーを注視して強調表示させた状態で、タッチパネル111上の任意の点をタッチすることで、注視した操作キーの機能を実行させることができる。例えば、図2(b)に示すように、プレビュー画面を表示させる操作キー81bを操作する場合、ユーザーは操作キー81bを注視する。これにより、視線検出部11によりタッチパネル111上のユーザーの注視点80bが算出され、注視点80bの近傍に位置する操作キー81bが検出され、強調処理部12により操作キー81bが強調表示される。操作キー81bが強調表示された状態で、ユーザーがタッチパネル111をタッチすると、制御部14により、強調表示された操作キー81bの確定操作がされたものとして動作制御され、コピーイメージを表示するプレビュー画面が表示される。このとき、ユーザーによってタッチされたタッチ点82は、タッチパネル111上の任意の場所でよく、他の操作キー81aが表示されていたり、操作キーではないアイコンが表示されていたりしてもよい。逆に、アイコン等が表示されていなくてもよい。
When operating the operation key, the user can execute the function of the watched operation key by touching an arbitrary point on the
上記の視線を用いた操作処理の流れについて、図3を参照して具体的に説明する。 The flow of operation processing using the above-mentioned line of sight will be specifically described with reference to FIG.
視線検出部11は、ユーザーによって注視された操作キーがあるか判定し(ステップs11)、注視された操作キーがない場合(ステップs11でNo)、ステップs11に処理を戻す。注視された操作キーがあるか否かは、例えば、注視点から特定範囲内に操作キーが表示されている場合に、操作キーがあると判定され、注視点から特定範囲内に操作キーが表示されていない場合に、操作キーがないと判定されてもよい。
The line-of-
注視された操作キーがある場合(ステップs11でYes)、強調処理部12は、視線検出部11により検出された操作キー、すなわち、ユーザーに注視された操作キーを強調表示させる(ステップs12)。
If there is a gaze operation key (Yes in step s11), the
つづいて、制御部14は、タッチパネル111がタッチされたか判定し(ステップs13)、タッチされていなければ(ステップs13でNo)、ステップs11に処理を戻す。タッチパネル111がタッチされると(ステップs13でYes)、制御部14は、強調表示された操作キーに割り当てられた機能を実行して(ステップs14)、本処理を終了する。
Subsequently, the
このように、本実施形態の画像形成装置100は、タッチパネルがタッチされた場合に、タッチ位置に関係なく、ユーザーに注視された操作キーの機能を実行する。つまり、タッチパネル111全体がユーザーに注視された操作キーに紐付けられ、ユーザーに注視された操作キーの確定ボタンとして機能して操作を受け付ける。そのため、ユーザーは、注視して強調表示させた操作キーの確定操作を行う際に、タッチパネル上の任意の点をタッチすればよいので、操作対象の操作キーから視線を外すことなく、簡単に操作することができる。また、これによれば、ユーザーに操作キーをタッチさせなくてもよいので、操作キーの配置位置や大きさを自由に設計することができる。
As described above, when the touch panel is touched, the
本発明は上述した実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で種々様々に変更が可能であることは言うまでもない。 The present invention is not limited to the above-described embodiment, and it goes without saying that various changes can be made without departing from the spirit of the present invention.
10 操作パネル
11 視線検出部
12 強調処理部
13 通信部
14 制御部
15 記憶部
16 原稿読取部
17 画像処理部
18 印刷部
80a、80b 注視点
81a、81b 操作キー
82 タッチ点
83 目
100 画像形成装置
111 タッチパネル
112 操作ボタン
DESCRIPTION OF
Claims (3)
ユーザーの視線が向けられた操作キーを検出する視線検出部と、
前記表示面上のいずれの位置をタッチされた場合でも、前記視線検出部で検出された前記操作キーの確定操作がされたものとして動作制御する制御部と
を備えたことを特徴とする電子機器。 A touch panel for detecting a touch on the display surface;
A line-of-sight detector that detects an operation key to which the user's line of sight is directed;
An electronic device comprising: a control unit that controls the operation as if the operation key detected by the line-of-sight detection unit has been confirmed even when touched at any position on the display surface .
ことを特徴とする請求項1に記載の電子機器。 The electronic apparatus according to claim 1, further comprising an emphasis processing unit that highlights an operation key detected by the line-of-sight detection unit.
表示面上のタッチを検出するタッチ検出ステップと、
ユーザーの視線が向けられた操作キーを検出する視線検出ステップと、
前記表示面上のいずれの位置がタッチされた場合でも、前記視線検出ステップで検出された前記操作キーの確定操作がされたものとして動作制御する制御ステップと
を実行させるための操作支援プログラム。 Electronic equipment,
A touch detection step for detecting a touch on the display surface;
A line-of-sight detection step for detecting an operation key to which the user's line of sight is directed;
An operation support program for executing a control step of controlling the operation as if the operation of confirming the operation key detected in the line-of-sight detection step is performed regardless of which position on the display surface is touched.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014065514A JP2015191241A (en) | 2014-03-27 | 2014-03-27 | Electronic apparatus and operation support program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014065514A JP2015191241A (en) | 2014-03-27 | 2014-03-27 | Electronic apparatus and operation support program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015191241A true JP2015191241A (en) | 2015-11-02 |
Family
ID=54425731
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014065514A Pending JP2015191241A (en) | 2014-03-27 | 2014-03-27 | Electronic apparatus and operation support program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2015191241A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018049527A (en) * | 2016-09-23 | 2018-03-29 | 富士ゼロックス株式会社 | Information processing apparatus, image forming apparatus, and program |
JP2019036927A (en) * | 2017-08-21 | 2019-03-07 | 富士ゼロックス株式会社 | Image processing device |
JP2020098466A (en) * | 2018-12-18 | 2020-06-25 | コニカミノルタ株式会社 | Image processing device, image forming system, image forming device, control method, and computer program |
JP2021068482A (en) * | 2021-02-03 | 2021-04-30 | マクセル株式会社 | Method for controlling portable terminal |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07248872A (en) * | 1994-03-11 | 1995-09-26 | Matsushita Electric Ind Co Ltd | Input device and arithmetic input/output device |
-
2014
- 2014-03-27 JP JP2014065514A patent/JP2015191241A/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07248872A (en) * | 1994-03-11 | 1995-09-26 | Matsushita Electric Ind Co Ltd | Input device and arithmetic input/output device |
Non-Patent Citations (1)
Title |
---|
TAKASHI NAGAMATSU,外2名: ""MobiGaze: Development of a Gaze Interface for Handheld Mobile Devices"", CHI EA '10 EXTENDED ABSTRACTS ON HUMAN FACTORS IN COMPUTING SYSTEMS, JPN7017000646, 9 April 2010 (2010-04-09), US, pages 3349 - 3354, ISSN: 0003505111 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018049527A (en) * | 2016-09-23 | 2018-03-29 | 富士ゼロックス株式会社 | Information processing apparatus, image forming apparatus, and program |
JP2019036927A (en) * | 2017-08-21 | 2019-03-07 | 富士ゼロックス株式会社 | Image processing device |
JP2020098466A (en) * | 2018-12-18 | 2020-06-25 | コニカミノルタ株式会社 | Image processing device, image forming system, image forming device, control method, and computer program |
JP2021068482A (en) * | 2021-02-03 | 2021-04-30 | マクセル株式会社 | Method for controlling portable terminal |
JP7176020B2 (en) | 2021-02-03 | 2022-11-21 | マクセル株式会社 | Mobile device control method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7070003B2 (en) | Display device and image forming device | |
JP2015032255A (en) | Display device, display program and image processor | |
US10063723B2 (en) | Display input device for successively reducing the size of a screen element during a selected processing of an image forming apparatus | |
JP2015191241A (en) | Electronic apparatus and operation support program | |
KR20160007412A (en) | Information processing apparatus, method for controlling the same, and storage medium | |
JP6332083B2 (en) | Image forming apparatus and character display method in image forming apparatus | |
JP6141221B2 (en) | Numerical input device and electronic device | |
US8982397B2 (en) | Image processing device, non-transitory computer readable recording medium and operational event determining method | |
EP3037943B1 (en) | Display/input device, image forming apparatus, and method for controlling a display/input device | |
JP2007334025A (en) | Operation apparatus and image forming apparatus | |
US10691293B2 (en) | Display device and computer-readable non-transitory recording medium with display control program stored thereon | |
JP2020009372A (en) | Image processing apparatus, control method of image processing apparatus and program | |
JP2008310521A (en) | Touch panel control device and electric equipment | |
JP5973405B2 (en) | Input device and electronic device | |
JP6907483B2 (en) | Information processing equipment, image forming equipment and programs | |
US10484548B2 (en) | Operation display system, operation display apparatus, and operation display program | |
US9819817B2 (en) | Display input device and method of controlling display input device | |
JP2015028733A (en) | Operation device and image processing apparatus | |
JP6295997B2 (en) | Image forming apparatus | |
US11099689B2 (en) | Receiving device | |
JP2015028734A (en) | Operation device and image processing apparatus | |
JP6221622B2 (en) | Touch panel device and image forming apparatus | |
US20150277689A1 (en) | Display input apparatus and computer-readable non-transitory recording medium with display input control program recorded thereon | |
US10805478B2 (en) | Detection apparatus and image forming apparatus for canceling an operation of the detection apparatus based on a detection result | |
US20220303402A1 (en) | Information processing apparatus and non-transitory computer readable medium storing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160620 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170405 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170725 |