JP2006178880A - Display device, and operation instruction device and method - Google Patents

Display device, and operation instruction device and method Download PDF

Info

Publication number
JP2006178880A
JP2006178880A JP2004373772A JP2004373772A JP2006178880A JP 2006178880 A JP2006178880 A JP 2006178880A JP 2004373772 A JP2004373772 A JP 2004373772A JP 2004373772 A JP2004373772 A JP 2004373772A JP 2006178880 A JP2006178880 A JP 2006178880A
Authority
JP
Japan
Prior art keywords
operation instruction
information
display device
optical information
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004373772A
Other languages
Japanese (ja)
Other versions
JP4501680B2 (en
Inventor
Yutaka Nakamura
豊 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2004373772A priority Critical patent/JP4501680B2/en
Publication of JP2006178880A publication Critical patent/JP2006178880A/en
Application granted granted Critical
Publication of JP4501680B2 publication Critical patent/JP4501680B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Input From Keyboards Or The Like (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a display device, and an operation instruction device and method that enable easy mounting of the operation instruction device for those who cannot or can hardly see display by dispensing with modifications to an existing touch panel. <P>SOLUTION: When the operation instruction device is positioned on the touch panel, a display control part switches the touch panel to a display layout corresponding to the operation instruction device. When a hardware key of the operation instruction device is depressed, the hardware key physically touches the touch panel, and the display control part identifies the position of the hardware key touch on the touch panel to recognize operation instruction information. An optical information reception part reads an ON/OFF state of an optical information emission area, an optical information recognition part recognizes the information about a transition to a copy mode from the ON/OFF state read, and a speaker outputs voice guidance. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、表示装置、操作指示装置および方法に関し、特に、操作指示を行う液晶ディスプレイを有する装置等に用いられる表示装置、操作指示装置および方法に関する。   The present invention relates to a display device, an operation instruction device, and a method, and more particularly, to a display device, an operation instruction device, and a method that are used in a device having a liquid crystal display that performs operation instructions.

操作指示機能を有する情報表示装置として、ディスプレイ上にタッチパネル操作指示方式が採用されている。タッチパネル操作指示方式は極めて薄型であり、更に、スイッチとして使用できる領域の選択の自由度が高いという利点を有する。   As an information display device having an operation instruction function, a touch panel operation instruction method is adopted on a display. The touch panel operation instruction method is extremely thin, and further has an advantage of a high degree of freedom in selecting an area that can be used as a switch.

通常のタッチパネル操作指示方式は視覚情報を、例えば、ＬＣＤ（液晶ディスプレイ）で表示し、ＬＣＤで指示された部位の透明パネルを押す方式であるが、透明パネルは平坦であるため、例えば、表示が見えない全盲の人等には適切に操作キーを押すことが困難である。   A normal touch panel operation instruction method is a method in which visual information is displayed on, for example, an LCD (liquid crystal display), and a transparent panel at a part indicated by the LCD is pressed. However, since the transparent panel is flat, for example, display is possible. It is difficult for an invisible blind person or the like to press an operation key appropriately.

例えば、透明ハードスイッチをタッチパネルに装着して触覚情報を付加することで、操作者に操作感を与えることができ、全盲の人でもタッチパネル操作指示方式を操作することができる情報表示装置および操作入力装置がある（例えば、特許文献１参照。）。
特開平１１−２１２７２５号公報 For example, by attaching a transparent hard switch to the touch panel and adding tactile information, it is possible to give the operator a sense of operation, and even a blind person can operate the touch panel operation instruction method and operation input There is an apparatus (for example, refer to Patent Document 1).
JP-A-11-212725

しかし、特許文献１に記載の技術では、操作入力装置と情報表示装置とが一体になっている構成であるため、このような構成を用いていない既存の装置に上記操作入力装置を簡易に取り付けることは困難である。また、操作情報はハードキーからのみの伝達のため、例えば、音声ガイドのようなハードオプションを簡易に装着することも困難である。   However, since the technique described in Patent Document 1 has a configuration in which the operation input device and the information display device are integrated, the operation input device is simply attached to an existing device that does not use such a configuration. It is difficult. Further, since the operation information is transmitted only from the hard key, it is difficult to easily attach a hardware option such as a voice guide, for example.

そこで、本発明は、既存のタッチパネルに改造を加えることなく、表示が見えない若しくは見にくい人等のための操作指示装置を簡易的に取り付けることを可能とする表示装置、操作指示装置および方法を提供することを目的とする。   Therefore, the present invention provides a display device, an operation instruction device, and a method capable of easily attaching an operation instruction device for a person who cannot see or difficult to see without modifying the existing touch panel. The purpose is to do.

上記目的を達成するため、請求項１の発明は、タッチパネル操作指示方式を採用する表示装置の画面上に設置する操作指示装置において、押下により前記画面と物理的に接触し、前記表示装置に対する操作指示情報を入力する少なくとも１つのハードキーと、前記表示装置から伝送された前記操作指示情報に関する情報を示す光学情報を受け取る光学情報受取手段と、前記光学情報受取手段で受け取った光学情報から前記操作指示情報に関する情報を認識する光学情報認識手段と、前記光学情報認識手段で認識した情報を出力する出力手段とを具備することを特徴とする。   In order to achieve the above object, an invention according to claim 1 is an operation instruction device installed on a screen of a display device adopting a touch panel operation instruction method, and physically touches the screen when pressed to operate the display device. At least one hard key for inputting instruction information, optical information receiving means for receiving optical information indicating information on the operation instruction information transmitted from the display device, and the operation from the optical information received by the optical information receiving means Optical information recognition means for recognizing information relating to instruction information, and output means for outputting information recognized by the optical information recognition means.

また、請求項２の発明は、請求項１の発明において、前記出力手段は、音声出力手段であり、前記光学情報認識手段で認識した情報に対応する音声を出力することを特徴とする。   The invention of claim 2 is characterized in that, in the invention of claim 1, the output means is a voice output means, and outputs a voice corresponding to the information recognized by the optical information recognition means.

また、請求項３の発明は、タッチパネル操作指示方式を採用する画面を具備する表示装置において、押下により前記画面と物理的に接触する少なくとも１つのハードキーを有する操作指示装置が設置された際に、所定の表示レイアウトに変更する表示制御手段と、前記ハードキーが押下されることで該ハードキーと前記画面とが物理的に接触した際に、該接触した位置に基づいて操作指示情報を認識する操作指示情報認識手段と、前記操作指示情報認識手段で認識した操作指示情報に関する情報を光学情報として前記操作指示装置に伝送する情報伝送手段とを具備することを特徴とする。   According to a third aspect of the present invention, when an operation instruction device having at least one hard key that comes into physical contact with the screen when pressed is installed in a display device having a screen that employs a touch panel operation instruction method. When the hard key and the screen come into physical contact with each other when the hard key is pressed down, the operation instruction information is recognized based on the touched position. Operating instruction information recognizing means, and information transmitting means for transmitting information related to the operation instruction information recognized by the operation instruction information recognizing means as optical information to the operation instruction device.

また、請求項４の発明は、請求項３の発明において、前記情報伝送手段は、前記画面の特定領域の発光のＯＮ／ＯＦＦを制御することで前記光学情報を生成することを特徴とする。   According to a fourth aspect of the invention, in the third aspect of the invention, the information transmission means generates the optical information by controlling ON / OFF of light emission in a specific area of the screen.

また、請求項５の発明は、請求項３の発明において、前記情報伝送手段は、前記画面の特定領域を複数の段階を設けて表示することで前記光学情報を生成することを特徴とする。   The invention according to claim 5 is the invention according to claim 3, wherein the information transmission means generates the optical information by displaying the specific area of the screen in a plurality of stages.

また、請求項６の発明は、請求項３の発明において、前記表示制御手段は、前記ハードキー毎に前記操作指示情報が設定されている場合、該ハードキーに設定された操作指示情報に対応する表示レイアウトを表示することを特徴とする。   The invention according to claim 6 is the invention according to claim 3, wherein, when the operation instruction information is set for each hard key, the display control means corresponds to the operation instruction information set for the hard key. The display layout to be displayed is displayed.

また、請求項７の発明は、タッチパネル操作指示方式を採用する表示装置の画面上に設置する操作指示装置を設置し、前記操作指示装置の設置により、前記画面の表示レイアウトが該操作指示装置に対応する表示レイアウトに変更され、前記操作指示装置が有するハードキーが押下されることで該ハードキーと前記画面とが物理的に接触し、前記表示装置は前記ハードキーと接触した位置に基づき、該表示装置に対する操作指示情報を認識し、該認識した操作指示情報に関する情報を光学情報として前記操作指示装置に伝送し、前記操作指示装置は前記表示装置から伝送された光学情報を受け取り、受け取った光学情報から前記操作指示情報に関する情報を認識し、該認識した情報を出力することを特徴とする。   According to a seventh aspect of the present invention, an operation instruction device installed on a screen of a display device adopting a touch panel operation instruction method is installed, and the display layout of the screen is changed to the operation instruction device by the installation of the operation instruction device. The display is changed to a corresponding display layout, and when the hard key of the operation instruction device is pressed, the hard key and the screen are in physical contact, and the display device is based on the position in contact with the hard key, Recognizing operation instruction information for the display device, and transmitting information about the recognized operation instruction information to the operation instruction device as optical information, and the operation instruction device receives and receives the optical information transmitted from the display device Information on the operation instruction information is recognized from optical information, and the recognized information is output.

また、請求項８の発明は、請求項７の発明において、前記操作指示装置は、前記認識した情報に対応する音声を出力することを特徴とする。   The invention according to claim 8 is the invention according to claim 7, wherein the operation instruction device outputs a sound corresponding to the recognized information.

また、請求項９の発明は、請求項７の発明において、前記表示装置は、前記画面の特定領域の発光のＯＮ／ＯＦＦを制御することで前記光学情報を生成することを特徴とする。   The invention according to claim 9 is the invention according to claim 7, wherein the display device generates the optical information by controlling ON / OFF of light emission in a specific area of the screen.

また、請求項１０の発明は、請求項７の発明において、前記表示装置は、前記画面の特定領域を複数の段階を設けて表示することで前記光学情報を生成することを特徴とする。   The invention of claim 10 is characterized in that, in the invention of claim 7, the display device generates the optical information by displaying the specific area of the screen in a plurality of stages.

また、請求項１１の発明は、請求項７の発明において、前記表示装置は、前記ハードキー毎に前記操作指示情報が設定されている場合、該ハードキーに設定された操作指示情報に対応する表示レイアウトを表示することを特徴とする。   The invention according to claim 11 is the invention according to claim 7, wherein, when the operation instruction information is set for each hard key, the display device corresponds to the operation instruction information set for the hard key. A display layout is displayed.

本発明によれば、ハードキーを介してタッチパネルを操作することで、視覚情報に頼らずに操作指示情報を入力することが可能になるという効果を奏する。   According to the present invention, it is possible to input operation instruction information without depending on visual information by operating a touch panel via a hard key.

また、本発明によれば、既存のタッチパネルにハード的な改造を加えることなく利用でき、また、双方向の情報のやり取りも可能であるため、音声ガイドをはじめ、インタラクティブな処理を実現することが可能になるという効果を奏する。   In addition, according to the present invention, it is possible to use an existing touch panel without making a hardware modification, and interactive information exchange is possible because interactive information can be exchanged. There is an effect that it becomes possible.

以下、本発明に係る表示装置、操作指示装置および方法の実施の形態について添付図面を参照して詳細に説明する。   DESCRIPTION OF EMBODIMENTS Hereinafter, embodiments of a display device, an operation instruction device, and a method according to the present invention will be described in detail with reference to the accompanying drawings.

図１は、本発明に係る操作指示装置１の外形の一例を示す図である。   FIG. 1 is a diagram showing an example of the outer shape of an operation instruction device 1 according to the present invention.

操作指示装置１はクリック感のある複数のハードキー２で構成され、必要に応じてスピーカー３、音量ボリューム等を付加することで、音声ガイド機能を実現することができる。これらハードキー２の表側には、「コピー」、「ファクス」、「スキャン」等の各種機能の名称が記載されている。操作指示装置１の裏側には、表示装置からの現在の状態、次にすべき指示等の情報を示す光学情報を受光する光学情報受光部４が取り付けられている。   The operation instruction device 1 is composed of a plurality of hard keys 2 having a click feeling, and a voice guide function can be realized by adding a speaker 3, a volume, and the like as necessary. On the front side of these hard keys 2, names of various functions such as “copy”, “fax”, and “scan” are described. On the back side of the operation instruction device 1, an optical information light receiving unit 4 for receiving optical information indicating information such as a current state from the display device and an instruction to be next is attached.

図２は、操作指示装置１の汎用の表示装置５への取り付けの一例を示す図である。   FIG. 2 is a diagram illustrating an example of attachment of the operation instruction device 1 to the general-purpose display device 5.

図２に示すように、汎用の表示装置５は、ＬＣＤのタッチパネル６と、ナンバーキー、スタートキー、ストップキー、リセットキー等のハードキー７とを具備して構成されている。   As shown in FIG. 2, the general-purpose display device 5 includes an LCD touch panel 6 and hard keys 7 such as a number key, a start key, a stop key, and a reset key.

本発明では、タッチパネル６の上に操作指示装置１を設置するだけで良い。決して、タッチパネル６と操作指示装置１とが一体型になっているのではなく、あくまでもタッチパネル６の上に操作指示装置１を重ねているだけである。   In the present invention, it is only necessary to install the operation instruction device 1 on the touch panel 6. The touch panel 6 and the operation instruction device 1 are not integrated with each other, but the operation instruction device 1 is simply stacked on the touch panel 6.

そして、タッチパネル６の上に操作指示装置１が設置されると、図２に示すように、表示装置５はタッチパネル６の表示レイアウトを操作指示装置１のハードキーに対応する表示レイアウトに変更する。例えば、操作指示装置１の「コピー」と記載されたハードキーが接触する部分をコピー機能指示領域とする。つまり、操作指示装置１の「コピー」と記載されたハードキーが押下等されると、押下等されたハードキーが物理的にタッチパネルのコピー機能指示領域に接触し、その指示が本体（いわゆる、表示措置５を具備している装置本体の主制御部等）に送られることになる。   When the operation instruction device 1 is installed on the touch panel 6, the display device 5 changes the display layout of the touch panel 6 to a display layout corresponding to the hard keys of the operation instruction device 1 as shown in FIG. 2. For example, a portion where the hard key described as “copy” of the operation instruction device 1 contacts is set as a copy function instruction area. That is, when the hard key described as “copy” of the operation instruction device 1 is pressed or the like, the pressed hard key physically contacts the copy function instruction area of the touch panel, and the instruction is the main body (so-called To the main control unit of the apparatus main body provided with the display means 5).

また、表示レイアウトとして操作指示装置１に情報を送る光学情報発光領域８が設けられ、この領域の位置は操作指示装置１の裏側に取り付けられている光学情報受光部４の位置に対応している。表示装置５から操作指示装置１への情報伝送は、タッチパネル６の光学情報発光領域８のＯＮ／ＯＦＦの状態を操作指示装置１の光学情報受光部４が読み取り、バイナリデータとして読み取ることができる。   Further, an optical information light emitting area 8 for sending information to the operation instruction apparatus 1 is provided as a display layout, and the position of this area corresponds to the position of the optical information light receiving unit 4 attached to the back side of the operation instruction apparatus 1. . Information transmission from the display device 5 to the operation instruction device 1 can be read as binary data by the optical information light receiving unit 4 of the operation instruction device 1 reading the ON / OFF state of the optical information light emitting region 8 of the touch panel 6.

なお、単なるＯＮ／ＯＦＦのような２値の制御に限定する必要はなく、例えば、画像の表示の状態に複数の段階を設ける、画像の表示の状態に複数の色情報を設ける等のアナログ的に複数の段階を設ける構成も適用可能である。また、二次元バーコード等の他の方式を用いる構成も適用可能である。   Note that it is not necessary to limit to binary control such as simple ON / OFF. For example, analog control such as providing a plurality of stages in the image display state, or providing a plurality of color information in the image display state, etc. A configuration in which a plurality of stages are provided in the case is also applicable. A configuration using other methods such as a two-dimensional barcode can also be applied.

上述した構成を用いることで、表示装置５に対して表示レイアウト、光学情報発光領域８を設ける等を含めたソフトウェアの追加が必要になるものの、表示装置５のハード構成を変更する必要はない。   By using the above-described configuration, it is necessary to add software including a display layout, an optical information light emitting region 8 and the like to the display device 5, but it is not necessary to change the hardware configuration of the display device 5.

図３は、操作指示装置１および表示装置５の機能的な構成を示す図である。   FIG. 3 is a diagram illustrating a functional configuration of the operation instruction device 1 and the display device 5.

タッチパネル６の上に操作指示装置１が設置されると、表示装置５の表示制御部９はタッチパネル６の表示レイアウトを操作指示装置１に対応する表示レイアウトに変更する。なお、操作指示装置１の設置の検出の方法として、ハード的な検出、ソフト的な検出どちらを用いても良い。   When the operation instruction device 1 is installed on the touch panel 6, the display control unit 9 of the display device 5 changes the display layout of the touch panel 6 to a display layout corresponding to the operation instruction device 1. As a method for detecting the installation of the operation instruction device 1, either hardware detection or software detection may be used.

操作指示装置１のハードキーが押下されると、押下されたハードキーが物理的にタッチパネル６に接触する。表示装置５の表示制御部９はタッチパネル６上のハードキーが接触した位置を特定し、特定した位置に基づいて操作指示情報を認識する。   When the hard key of the operation instruction device 1 is pressed, the pressed hard key physically contacts the touch panel 6. The display control unit 9 of the display device 5 identifies the position where the hard key on the touch panel 6 is in contact, and recognizes the operation instruction information based on the identified position.

具体的には、表示制御部５が操作指示情報が「コピー」であると認識した場合、タッチパネル６の光学情報発光領域８のＯＮ／ＯＦＦを制御してコピーモードに移行したという情報を操作指示装置１に伝送する。操作指示装置１の光学情報受光部４はタッチパネル６の光学情報発光領域８のＯＮ／ＯＦＦの状態を読み取り、光学情報認識部１０が光学情報発光領域８のＯＮ／ＯＦＦの状態からコピーモードに移行したという情報を認識し、「コピーモードに移行しました」という音声ガイドをスピーカー３から出力する。なお、音声ガイド以外の音声を出力しても良い。   Specifically, when the display control unit 5 recognizes that the operation instruction information is “copy”, the information indicating that the optical information light emitting area 8 of the touch panel 6 is turned on and off and the mode is changed to the copy mode is indicated as the operation instruction. Transmit to device 1. The optical information light receiving unit 4 of the operation instruction device 1 reads the ON / OFF state of the optical information light emitting area 8 of the touch panel 6, and the optical information recognition unit 10 shifts from the ON / OFF state of the optical information light emitting area 8 to the copy mode. Recognizing that the information has been made, the speaker 3 outputs a voice guide that “the printer has shifted to the copy mode”. Note that sound other than the voice guide may be output.

次に、操作指示装置および表示装置で行われる処理手順について図４に示すフローチャートを参照して説明する。   Next, processing procedures performed by the operation instruction device and the display device will be described with reference to a flowchart shown in FIG.

操作指示装置が表示装置のタッチパネルの上に設置される（ステップＳ４０１）。表示装置はタッチパネルの表示レイアウトを変更する（ステップＳ４０２）。操作指示装置のハードキーが押下される（ステップＳ４０３）。   The operation instruction device is installed on the touch panel of the display device (step S401). The display device changes the display layout of the touch panel (step S402). The hard key of the operation instruction device is pressed (step S403).

表示装置はタッチパネルの押下位置に基づいて操作指示情報を認識し（ステップＳ４０４）、操作指示装置に対して情報を光学情報として伝送する（ステップＳ４０５）。   The display device recognizes the operation instruction information based on the pressed position of the touch panel (step S404), and transmits the information as optical information to the operation instruction device (step S405).

操作指示装置は光学情報を受信し（ステップＳ４０６）、受信した光学情報を認識し（ステップＳ４０７）、認識した情報に従う処理を行う（ステップＳ４０８）。   The operation instruction device receives the optical information (step S406), recognizes the received optical information (step S407), and performs processing according to the recognized information (step S408).

なお、透明なハードキーを用いることで、タッチパネルの表示レイアウトを利用する構成も適用可能である。そのような構成を適用する場合、例えば、図５に示すように、操作指示装置１の「原稿モード」のハードキーを押下すると、表示が「原稿モード」から「Ａ４」に変更するようにしても良い。   A configuration using a display layout of a touch panel by using a transparent hard key is also applicable. When such a configuration is applied, for example, as shown in FIG. 5, when the “original mode” hard key of the operation instruction apparatus 1 is pressed, the display changes from “original mode” to “A4”. Also good.

また、タッチパネルの一部のみ操作指示装置を設置し、タッチパネルの表示レイアウトの一部を利用する構成も適用可能である。例えば、図６に示すように、タッチパネル６の下部に操作指示装置１を設置し、タッチパネル６の上部に現在の状態等を大きな文字で表示している。   A configuration in which an operation instruction device is installed only in a part of the touch panel and a part of the display layout of the touch panel is used is also applicable. For example, as shown in FIG. 6, the operation instruction device 1 is installed in the lower part of the touch panel 6, and the current state and the like are displayed in large letters on the upper part of the touch panel 6.

本発明に係る操作指示装置の外形の一例を示す図である。It is a figure which shows an example of the external shape of the operation instruction apparatus which concerns on this invention. 操作指示装置の汎用の表示装置への取り付けの一例を示す図である。It is a figure which shows an example of attachment to the general purpose display apparatus of an operation instruction apparatus. 操作指示装置および表示装置の機能的な構成を示す図である。It is a figure which shows the functional structure of an operation instruction | indication apparatus and a display apparatus. 操作指示装置および表示装置で行われる処理手順を示すフローチャートである。It is a flowchart which shows the process sequence performed with an operation instruction apparatus and a display apparatus. 本発明に係る変形例を示す図である。It is a figure which shows the modification based on this invention. 本発明に係る変形例を示す図である。It is a figure which shows the modification based on this invention.

符号の説明Explanation of symbols

１ 操作指示装置
２ ハードキー
３ スピーカー
４ 光学情報受光部
５ 表示装置
６ タッチパネル
７ ハードキー
８ 光学情報発光領域
９ 表示制御部
１０ 光学情報認識部 DESCRIPTION OF SYMBOLS 1 Operation instruction device 2 Hard key 3 Speaker 4 Optical information light-receiving part 5 Display apparatus 6 Touch panel 7 Hard key 8 Optical information light emission area 9 Display control part 10 Optical information recognition part

Claims (11)

タッチパネル操作指示方式を採用する表示装置の画面上に設置する操作指示装置において、
押下により前記画面と物理的に接触し、前記表示装置に対する操作指示情報を入力する少なくとも１つのハードキーと、
前記表示装置から伝送された前記操作指示情報に関する情報を示す光学情報を受け取る光学情報受取手段と、
前記光学情報受取手段で受け取った光学情報から前記操作指示情報に関する情報を認識する光学情報認識手段と、
前記光学情報認識手段で認識した情報を出力する出力手段と
を具備することを特徴とする操作指示装置。 In the operation instruction device installed on the screen of the display device adopting the touch panel operation instruction method,
At least one hard key that physically touches the screen when pressed and inputs operation instruction information for the display device;
Optical information receiving means for receiving optical information indicating information related to the operation instruction information transmitted from the display device;
Optical information recognition means for recognizing information related to the operation instruction information from the optical information received by the optical information receiving means;
An operation instruction apparatus comprising: output means for outputting information recognized by the optical information recognition means. 前記出力手段は、
音声出力手段であり、前記光学情報認識手段で認識した情報に対応する音声を出力する
ことを特徴とする請求項１記載の操作指示装置。 The output means includes
The operation instruction device according to claim 1, wherein the operation instruction device is a voice output unit, and outputs a voice corresponding to the information recognized by the optical information recognition unit. タッチパネル操作指示方式を採用する画面を具備する表示装置において、
押下により前記画面と物理的に接触する少なくとも１つのハードキーを有する操作指示装置が設置された際に、所定の表示レイアウトに変更する表示制御手段と、
前記ハードキーが押下されることで該ハードキーと前記画面とが物理的に接触した際に、該接触した位置に基づいて操作指示情報を認識する操作指示情報認識手段と、
前記操作指示情報認識手段で認識した操作指示情報に関する情報を光学情報として前記操作指示装置に伝送する情報伝送手段と
を具備することを特徴とする表示装置。 In a display device having a screen that employs a touch panel operation instruction method,
Display control means for changing to a predetermined display layout when an operation instruction device having at least one hard key that comes into physical contact with the screen by pressing is installed;
Operation instruction information recognition means for recognizing operation instruction information based on the contacted position when the hard key and the screen are physically contacted by pressing the hard key;
An information transmission means for transmitting information related to the operation instruction information recognized by the operation instruction information recognition means as optical information to the operation instruction device. 前記情報伝送手段は、
前記画面の特定領域の発光のＯＮ／ＯＦＦを制御することで前記光学情報を生成する
ことを特徴とする請求項３記載の表示装置。 The information transmission means includes
The display device according to claim 3, wherein the optical information is generated by controlling ON / OFF of light emission in a specific area of the screen. 前記情報伝送手段は、
前記画面の特定領域を複数の段階を設けて表示することで前記光学情報を生成する
ことを特徴とする請求項３記載の表示装置。 The information transmission means includes
The display device according to claim 3, wherein the optical information is generated by displaying a specific region of the screen in a plurality of stages. 前記表示制御手段は、
前記ハードキー毎に前記操作指示情報が設定されている場合、該ハードキーに設定された操作指示情報に対応する表示レイアウトを表示する
ことを特徴とする請求項３記載の表示装置。 The display control means includes
The display device according to claim 3, wherein when the operation instruction information is set for each hard key, a display layout corresponding to the operation instruction information set for the hard key is displayed. タッチパネル操作指示方式を採用する表示装置の画面上に設置する操作指示装置を設置し、
前記操作指示装置の設置により、前記画面の表示レイアウトが該操作指示装置に対応する表示レイアウトに変更され、
前記操作指示装置が有するハードキーが押下されることで該ハードキーと前記画面とが物理的に接触し、
前記表示装置は前記ハードキーと接触した位置に基づき、該表示装置に対する操作指示情報を認識し、該認識した操作指示情報に関する情報を光学情報として前記操作指示装置に伝送し、
前記操作指示装置は前記表示装置から伝送された光学情報を受け取り、受け取った光学情報から前記操作指示情報に関する情報を認識し、該認識した情報を出力する
ことを特徴とする操作指示方法。 Install the operation instruction device installed on the screen of the display device that adopts the touch panel operation instruction method,
By the installation of the operation instruction device, the display layout of the screen is changed to a display layout corresponding to the operation instruction device,
When the hard key of the operation instruction device is pressed, the hard key and the screen are in physical contact with each other,
The display device recognizes operation instruction information for the display device based on a position in contact with the hard key, and transmits information about the recognized operation instruction information to the operation instruction device as optical information.
The operation instruction method receives the optical information transmitted from the display device, recognizes information related to the operation instruction information from the received optical information, and outputs the recognized information. 前記操作指示装置は、
前記認識した情報に対応する音声を出力する
ことを特徴とする請求項７記載の操作指示方法。 The operation instruction device includes:
The operation instruction method according to claim 7, wherein a voice corresponding to the recognized information is output. 前記表示装置は、
前記画面の特定領域の発光のＯＮ／ＯＦＦを制御することで前記光学情報を生成する
ことを特徴とする請求項７記載の操作指示方法。 The display device
The operation instruction method according to claim 7, wherein the optical information is generated by controlling ON / OFF of light emission in a specific area of the screen. 前記表示装置は、
前記画面の特定領域を複数の段階を設けて表示することで前記光学情報を生成する
ことを特徴とする請求項７記載の操作指示方法。 The display device
The operation instruction method according to claim 7, wherein the optical information is generated by displaying a specific area of the screen in a plurality of stages. 前記表示装置は、
前記ハードキー毎に前記操作指示情報が設定されている場合、該ハードキーに設定された操作指示情報に対応する表示レイアウトを表示する
ことを特徴とする請求項７記載の操作指示方法。 The display device
The operation instruction method according to claim 7, wherein when the operation instruction information is set for each hard key, a display layout corresponding to the operation instruction information set for the hard key is displayed.
JP2004373772A 2004-12-24 2004-12-24 Display device, operation instruction device and method Expired - Fee Related JP4501680B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004373772A JP4501680B2 (en) 2004-12-24 2004-12-24 Display device, operation instruction device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004373772A JP4501680B2 (en) 2004-12-24 2004-12-24 Display device, operation instruction device and method

Publications (2)

Publication Number Publication Date
JP2006178880A true JP2006178880A (en) 2006-07-06
JP4501680B2 JP4501680B2 (en) 2010-07-14

Family

ID=36732933

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004373772A Expired - Fee Related JP4501680B2 (en) 2004-12-24 2004-12-24 Display device, operation instruction device and method

Country Status (1)

Country Link
JP (1) JP4501680B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013068863A1 (en) * 2011-11-11 2013-05-16 International Business Machines Corporation Mobile touch-generating device as secure loupe for touchscreen devices

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06332602A (en) * 1993-05-21 1994-12-02 Matsushita Electric Ind Co Ltd Information processor
JPH0764688A (en) * 1993-08-24 1995-03-10 Nippon Denyo Kk Input device for display panel
JPH08234896A (en) * 1995-02-24 1996-09-13 Casio Comput Co Ltd Data output device
JP2002342035A (en) * 2001-05-22 2002-11-29 Fuji Xerox Co Ltd Touch panel input device and image recorder
JP2004102813A (en) * 2002-09-11 2004-04-02 Fujitsu Ten Ltd Electronic device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06332602A (en) * 1993-05-21 1994-12-02 Matsushita Electric Ind Co Ltd Information processor
JPH0764688A (en) * 1993-08-24 1995-03-10 Nippon Denyo Kk Input device for display panel
JPH08234896A (en) * 1995-02-24 1996-09-13 Casio Comput Co Ltd Data output device
JP2002342035A (en) * 2001-05-22 2002-11-29 Fuji Xerox Co Ltd Touch panel input device and image recorder
JP2004102813A (en) * 2002-09-11 2004-04-02 Fujitsu Ten Ltd Electronic device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013068863A1 (en) * 2011-11-11 2013-05-16 International Business Machines Corporation Mobile touch-generating device as secure loupe for touchscreen devices
JP2015502592A (en) * 2011-11-11 2015-01-22 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ Movable touch generating device, system, communication method, and computer program medium (movable touch generating device as a safety loupe for touch panel devices)
US9218086B2 (en) 2011-11-11 2015-12-22 International Business Machines Corporation Mobile touch-generating device as secure loupe for touchscreen devices

Also Published As

Publication number Publication date
JP4501680B2 (en) 2010-07-14

Similar Documents

Publication Publication Date Title
US8334837B2 (en) Method for displaying approached interaction areas
JP4975765B2 (en) Programmable keypad
US7646315B2 (en) Method and apparatus for keypad manipulation
US6437774B1 (en) Display and input device and display and input system
JP5132028B2 (en) User interface device
KR20120047982A (en) Input device and method for controlling input device
JP2012519326A (en) Dynamic rear projection user interface
TWI457825B (en) Touch display, computer system having a touch display, and method of switching modes of a touch display
JP5065431B2 (en) Image reading apparatus and operation panel
KR20070091531A (en) Method of navigation on a mobile handset and the mobile handset
JP2008097371A (en) Display system, coordinate processing method, and program
EP2112586A1 (en) Operation method of user interface and computer readable medium and portable device
US20170083229A1 (en) Magnifying display of touch input obtained from computerized devices with alternative touchpads
CN1811682A (en) Input apparatus and touch-reading character/symbol input method
EP1923747A2 (en) Image Forming Apparatus and Facsimile Apparatus
JP2016167819A (en) Image forming apparatus including operation devices
JP2008225541A (en) Input apparatus and information equipment
JP2008009856A (en) Input device
JP4501680B2 (en) Display device, operation instruction device and method
KR101682527B1 (en) touch keypad combined mouse using thin type haptic module
JP2009205363A (en) Input display device
JP4498345B2 (en) Pointing device
GB2384649A (en) Telephone handset unit with a touch-sensitive display screen
JP2005339229A (en) Input apparatus, and input system
JP2007128152A (en) Pointing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100330

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100412

R150 Certificate of patent or registration of utility model

Ref document number: 4501680

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130430

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130430

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140430

Year of fee payment: 4

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees