JP6474853B2 - INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE - Google Patents

INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE Download PDF

Info

Publication number
JP6474853B2
JP6474853B2 JP2017087783A JP2017087783A JP6474853B2 JP 6474853 B2 JP6474853 B2 JP 6474853B2 JP 2017087783 A JP2017087783 A JP 2017087783A JP 2017087783 A JP2017087783 A JP 2017087783A JP 6474853 B2 JP6474853 B2 JP 6474853B2
Authority
JP
Japan
Prior art keywords
layer
coordinates
cover layer
digitizer
touch sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017087783A
Other languages
Japanese (ja)
Other versions
JP2018185699A (en
Inventor
中尾 竹伸
竹伸 中尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Priority to JP2017087783A priority Critical patent/JP6474853B2/en
Publication of JP2018185699A publication Critical patent/JP2018185699A/en
Application granted granted Critical
Publication of JP6474853B2 publication Critical patent/JP6474853B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)

Description

本発明は、タッチ操作を検出する検出層が組み込まれた入出力装置のタッチ操作に対する応答を制御する技術に関する。   The present invention relates to a technique for controlling a response to a touch operation of an input / output device in which a detection layer for detecting the touch operation is incorporated.

フラット・パネル型ディスプレイ(FPD)には、指で入力するタッチ・センサや電子ペン(スタイラス・ペン)で入力するデジタイザが一緒に組み込まれる場合がある。また、FPDには、可撓性のあるフィルムで形成し、折り曲げたり畳んだりした状態で表示できるいわゆるフレキシブル・ディスプレイというものがある。特許文献1は、静電容量式のタッチ・パネルと、ディスプレイ・パネルと、電磁誘導式のデジタイザを含むタッチ・スクリーンを開示する。特許文献2は、電磁誘導式のデジタイザまたは静電容量式のタッチ入力検出装置で構成したセンサ・アレイを組み込んだフレキシブル・ディスプレイを開示する。特許文献3は、電子ペンで操作する電磁誘導式のデジタイザについて記載する。   A flat panel display (FPD) may include a touch sensor for inputting with a finger and a digitizer for inputting with an electronic pen (stylus pen). In addition, FPD includes a so-called flexible display that is formed of a flexible film and can be displayed in a folded or folded state. Patent Document 1 discloses a touch screen including a capacitive touch panel, a display panel, and an electromagnetic induction digitizer. Patent Document 2 discloses a flexible display incorporating a sensor array composed of an electromagnetic induction type digitizer or a capacitance type touch input detection device. Patent Document 3 describes an electromagnetic induction type digitizer operated with an electronic pen.

米国特許出願公開第2016/0154528号明細書US Patent Application Publication No. 2016/0154528 米国特許出願公開第2008/0158171号明細書US Patent Application Publication No. 2008/015171 特許第5944362号公報Japanese Patent No. 5944362

タッチ・スクリーンは、指でタッチ操作をするタッチ・センサとFPDが積層された構造になっている。電磁誘導式のデジタイザを搭載するタッチ・スクリーンは、通常、電子ペンが放射する電磁波を透過する性質(電磁波透過性)がある。このときリジッドなタッチ・スクリーンが搭載するデジタイザは、電子ペンが指示した位置の座標だけを検出することができる。しかし、折りたたんだり丸めたりして表示できるフレキシブルなタッチ・スクリーンが搭載するデジタイザは、電子ペンが指示した位置の座標だけでなく、指示した位置から離れた位置の座標まで検出することがある。   The touch screen has a structure in which a touch sensor that performs a touch operation with a finger and an FPD are stacked. A touch screen equipped with an electromagnetic induction type digitizer usually has a property of transmitting an electromagnetic wave radiated by an electronic pen (electromagnetic wave transmission property). At this time, the digitizer mounted on the rigid touch screen can detect only the coordinates of the position designated by the electronic pen. However, a digitizer mounted on a flexible touch screen that can be folded and rolled up may detect not only the coordinates of the position indicated by the electronic pen but also the coordinates of a position away from the indicated position.

また、それぞれ電磁誘導式のデジタイザを搭載するフィルム状の複数のタッチ・スクリーンを積層して、それぞれのタッチ・スクリーンに本のように異なる画像を表示させる電子機器の検討が行われている。このとき、タッチ・スクリーンの電磁波透過性により最上位のタッチ・スクリーンに対して電子ペンで指示したときに同時に下層のタッチ・スクリーンが搭載するデジタイザも座標を検出する。このような場合にユーザが指示を意図しない座標を認識して適切な処理をすることが求められる。   In addition, studies are being made on electronic devices in which a plurality of film-like touch screens each equipped with an electromagnetic induction digitizer are stacked and different images are displayed on each touch screen like a book. At this time, the digitizer mounted on the lower touch screen simultaneously detects the coordinates when the uppermost touch screen is instructed by the electronic pen due to the electromagnetic wave transparency of the touch screen. In such a case, it is required that the user recognizes coordinates that are not intended to be instructed and performs appropriate processing.

本発明の目的は、タッチ操作を検出する検出層が組み込まれた入出力装置のタッチ操作に対する応答を適切に制御することにある。さらに本発明の目的は、電子ペンでタッチ操作をする電磁誘導式のデジタイザ層が組み込まれた入出力装置のタッチ操作に対する応答を適切に制御することにある。   An object of the present invention is to appropriately control a response to a touch operation of an input / output device in which a detection layer for detecting the touch operation is incorporated. A further object of the present invention is to appropriately control a response to a touch operation of an input / output device in which an electromagnetic induction digitizer layer that performs a touch operation with an electronic pen is incorporated.

本発明の第1の態様にかかる入出力装置は、表示ブロックと制御部を含む。表示ブロックは、タッチ操作面を提供する第1のカバー層と、第1のカバー層に対するタッチ操作を検出することが可能な第1の検出層と、タッチ操作を検出する第2の検出層と、第1のカバー層に正画像を表示するディスプレイ層とを含む。制御部は、第1のカバー層にタッチ操作がされたときに第1の検出層の出力に基づいて第2の検出層が検出した座標の有効性を判断する。   The input / output device according to the first aspect of the present invention includes a display block and a control unit. The display block includes a first cover layer that provides a touch operation surface, a first detection layer that can detect a touch operation on the first cover layer, and a second detection layer that detects the touch operation. And a display layer for displaying a positive image on the first cover layer. The control unit determines the validity of the coordinates detected by the second detection layer based on the output of the first detection layer when a touch operation is performed on the first cover layer.

表示ブロックは、折曲げが可能なフレキシブル・タイプと所定の剛性を備えるリジッド・タイプのいずれでもよい。第2の検出層は電子ペンでタッチ操作をする電磁誘導式のデジタイザ層とし、第1の検出層は指でタッチ操作をする静電容量式のタッチ・センサ層とすることができる。表示ブロックは、光透過率の高い材料で形成して、第1のカバー層に対向する面に配置した第2のカバー層にディスプレイ装置が反転画像を表示するようにしてもよい。   The display block may be either a flexible type that can be bent or a rigid type that has a predetermined rigidity. The second detection layer may be an electromagnetic induction digitizer layer that is touch-operated with an electronic pen, and the first detection layer may be a capacitive touch sensor layer that is touch-operated with a finger. The display block may be formed of a material having a high light transmittance, and the display device may display a reverse image on the second cover layer disposed on the surface facing the first cover layer.

本発明の第2の態様にかかる入出力装置は、表示ブロックが、タッチ操作面を提供する第1のカバー層と、タッチ操作面を提供する第2のカバー層と、第1のカバー層と第2のカバー層のいずれか一方に正画像を表示し他方に反転画像を表示するディスプレイ層と、第1のカバー層に対するタッチ操作を検出することが可能な第1のタッチ・センサ層と、第2のカバー層に対するタッチ操作を検出することが可能な第2のタッチ・センサ層と、第1のカバー層および第2のカバー層に対するタッチ操作を検出するデジタイザ層を有する。制御部は、第1のカバー層または第2のカバー層にタッチ操作がされたときに第1のタッチ・センサ層または第2のタッチ・センサ層の出力に基づいてデジタイザ層が検出した座標の有効性を判断する。   In the input / output device according to the second aspect of the present invention, the display block includes a first cover layer that provides a touch operation surface, a second cover layer that provides a touch operation surface, and a first cover layer. A display layer that displays a normal image on one of the second cover layers and an inverted image on the other, a first touch sensor layer capable of detecting a touch operation on the first cover layer, A second touch sensor layer capable of detecting a touch operation on the second cover layer; and a digitizer layer detecting a touch operation on the first cover layer and the second cover layer. The control unit detects the coordinates detected by the digitizer layer based on the output of the first touch sensor layer or the second touch sensor layer when a touch operation is performed on the first cover layer or the second cover layer. Determine effectiveness.

本発明の第3の態様にかかる入出力装置は、表示ブロックがそれぞれタッチ操作面を提供するカバー層と、カバー層に対するタッチ操作を検出することが可能な第1の検出層と、タッチ操作を検出する第2の検出層と、カバー層に画像を表示するディスプレイ層とを含みタッチ操作時に積層されている。制御部は、上位に積層された表示ブロックが含むカバー層にタッチ操作がされたときに各表示ブロックが含む第1の検出層が検出した座標に基づいて各表示ブロックが含む第2の検出層が検出した座標の有効性を判断する。   An input / output device according to a third aspect of the present invention includes a cover layer in which each display block provides a touch operation surface, a first detection layer capable of detecting a touch operation on the cover layer, and a touch operation. It includes a second detection layer for detection and a display layer for displaying an image on the cover layer, and is laminated during a touch operation. The control unit includes a second detection layer included in each display block based on coordinates detected by the first detection layer included in each display block when a touch operation is performed on the cover layer included in the display block stacked on the upper layer. Determine the validity of the coordinates detected by.

本発明により、タッチ操作を検出する検出層が組み込まれた入出力装置のタッチ操作に対する応答を適切に制御することができた。さらに本発明により、電子ペンでタッチ操作をする電磁誘導式のデジタイザ層が組み込まれた入出力装置のタッチ操作に対する応答を適切に制御することができた。   According to the present invention, the response to the touch operation of the input / output device in which the detection layer for detecting the touch operation is incorporated can be appropriately controlled. Furthermore, according to the present invention, the response to the touch operation of the input / output device in which the electromagnetic induction type digitizer layer that performs the touch operation with the electronic pen can be appropriately controlled.

本実施の形態にかかる入出力装置10の構成を説明するための機能ブロック図である。It is a functional block diagram for demonstrating the structure of the input / output device 10 concerning this Embodiment. 模式的に示した入出力装置10の平面図および分解斜視図である。It is the top view and exploded perspective view of the input / output device 10 typically shown. 本実施の形態にかかる他の入出力装置20の構成を説明するための機能ブロック図である。It is a functional block diagram for demonstrating the structure of the other input / output device 20 concerning this Embodiment. 入出力装置10、20に対して電子ペン15でタッチ操作をしたときの動作手順を説明するためのフローチャートである。4 is a flowchart for explaining an operation procedure when a touch operation is performed on the input / output devices 10 and 20 with the electronic pen 15. 正画像を表示するフレキシブル・タイプの表示ブロック200、250に電子ペン15でタッチ操作が行われたときにデジタイザ層207が検出するリアル座標とゴースト座標を説明するための図である。7 is a diagram for explaining real coordinates and ghost coordinates detected by the digitizer layer 207 when a touch operation is performed with the electronic pen 15 on the flexible display blocks 200 and 250 that display a normal image. FIG. 反転画像を表示するフレキシブル・タイプの表示ブロック200に電子ペン15でタッチ操作をしたときにデジタイザ層207が検出するリアル座標とゴースト座標を説明するための図である。6 is a diagram for explaining real coordinates and ghost coordinates detected by the digitizer layer 207 when a touch operation is performed with the electronic pen 15 on a flexible display block 200 that displays a reverse image. FIG. リジッド・タイプまたはタッチ操作時に平板状になっているフレキシブル・タイプの表示ブロック200、250に電子ペン15でタッチ操作をしたときにデジタイザ層207が検出するリアル座標を説明するための図である。It is a figure for demonstrating the real coordinate which the digitizer layer 207 detects when a touch operation is carried out with the electronic pen 15 to the rigid type or the flexible type display blocks 200 and 250 which are flat form at the time of a touch operation. リアル座標とゴースト座標を区別する方法を説明するための図である。It is a figure for demonstrating the method of distinguishing a real coordinate and a ghost coordinate. 本実施の形態にかかる他の入出力装置30の構成を説明するための機能ブロック図である。It is a functional block diagram for demonstrating the structure of the other input / output device 30 concerning this Embodiment. 本実施の形態にかかる他の入出力装置40を説明するための側面図である。It is a side view for demonstrating the other input / output device 40 concerning this Embodiment. 入出力装置40の構成を説明するための機能ブロック図である。3 is a functional block diagram for explaining a configuration of an input / output device 40. FIG. 入出力装置40に対して電子ペン15でタッチ操作が行われるときの表示ブロック500a〜500eの様子を説明するための図である。FIG. 6 is a diagram for explaining a state of display blocks 500a to 500e when a touch operation is performed on the input / output device 40 with the electronic pen 15. 入出力装置40に対して電子ペン15でタッチ操作をしたときの動作手順を説明するためのフローチャートである。6 is a flowchart for explaining an operation procedure when a touch operation is performed on the input / output device with the electronic pen.

[画像の方向が固定された視覚透過性がある入出力装置]
図1は、本実施の形態にかかる入出力装置10の構成を説明するための機能ブロック図である。図2は、模式的に示した入出力装置10の平面図および分解斜視図である。本明細書および図面において、本発明の理解のために同一または同等として扱ってよいハードウェア要素およびソフトウェア要素には同一の参照番号を付して説明を省略または簡略化する。
[I / O device with visual transparency with fixed image orientation]
FIG. 1 is a functional block diagram for explaining a configuration of an input / output device 10 according to the present embodiment. FIG. 2 is a plan view and an exploded perspective view of the input / output device 10 schematically shown. In the present specification and drawings, the same reference numerals are assigned to the hardware elements and software elements that may be treated as the same or equivalent for understanding the present invention, and the description will be omitted or simplified.

入出力装置10は、制御ブロック100と表示ブロック200で構成している。表示ブロック200は、主要な構成要素としてのカバー層201、タッチ・センサ層203、ディスプレイ層205、デジタイザ層207、およびカバー層209が順番に積層された構造になっている。表示ブロック200は、全体を光透過率の高い材料で形成して、視覚透過性を備えている。ここに視覚透過性は、表示ブロック200が画像を表示しないときに、表示ブロック200が透き通って背後の風景が見える性質をいう。表示ブロック200は、ディスプレイ層205が表示する画像を正画像としてカバー層201に表示し、同時に正画像が裏返った反転画像をカバー層209に表示する。   The input / output device 10 includes a control block 100 and a display block 200. The display block 200 has a structure in which a cover layer 201, a touch sensor layer 203, a display layer 205, a digitizer layer 207, and a cover layer 209 as main components are sequentially stacked. The display block 200 is formed of a material having a high light transmittance and has visual transparency. Here, the visual transparency refers to the property that when the display block 200 does not display an image, the display block 200 is transparent and the background scenery can be seen. The display block 200 displays an image displayed on the display layer 205 on the cover layer 201 as a normal image, and simultaneously displays an inverted image on which the normal image is turned over on the cover layer 209.

表示ブロック200は、平板状の形状を維持する程度の剛性があるリジッド・タイプでもよい。表示ブロック200はまた、基板材料にフィルム状のプラスチック材料を使用して折り曲げたり丸めたりした状態で表示できるようにしたフレキシブル・タイプでもよい。ここにフレキシブル・タイプは、表示ブロック200が図5、6で説明するような折り曲げや丸めができる程度の可撓性を備えていることを意味する。   The display block 200 may be a rigid type having a rigidity sufficient to maintain a flat plate shape. The display block 200 may also be a flexible type that can be displayed in a folded or rolled state using a film-like plastic material as a substrate material. Here, the flexible type means that the display block 200 is flexible enough to be bent and rounded as described in FIGS.

正画像を表示するカバー層201は、表示ブロック200の一方の面の輪郭を構成する。さらにカバー層201は、入出力装置10に対してタッチ操作をするためのタッチ操作面を提供する。ここにタッチ操作は、カバー層201に対して指13または電子ペン15を接触または接近させて、入出力装置10に入力する行為に相当する。タッチ操作にはタッチ・センサ層203の種類によってカバー層201に対する押圧を伴う場合もある。   The cover layer 201 that displays a normal image constitutes the outline of one surface of the display block 200. Further, the cover layer 201 provides a touch operation surface for performing a touch operation on the input / output device 10. Here, the touch operation corresponds to an action of bringing the finger 13 or the electronic pen 15 into contact with or approaching the cover layer 201 and inputting to the input / output device 10. The touch operation may be accompanied by pressing against the cover layer 201 depending on the type of the touch sensor layer 203.

タッチ・センサ層203は、一例においてカバー層201にタッチ操作をした指13の座標を静電容量式で検出するための電極パターンを含む。タッチ・センサ層203は、自己容量式および相互容量式のいずれの原理で座標を検出してもよい。ディスプレイ層205は、有機ELディスプレイおよびプラズマ・ディスプレイのような自発光型ディスプレイ、または液晶ディスプレイのような非自発光型ディスプレイを構成するための画素マトリクスを含む。液晶ディスプレイを採用する場合はディスプレイ層205が、制御ブロック100に配置した図示しないバックライトの光を導くための導光板を含む。画素マトリクスは、ゲート線とドレイン線が密集した配線パターンと画素を含む。   In one example, the touch sensor layer 203 includes an electrode pattern for detecting the coordinates of the finger 13 that has touched the cover layer 201 with a capacitance method. The touch sensor layer 203 may detect coordinates based on either the self-capacitance type or the mutual capacitance type principle. The display layer 205 includes a pixel matrix for constituting a self-luminous display such as an organic EL display and a plasma display, or a non-self-luminous display such as a liquid crystal display. When a liquid crystal display is employed, the display layer 205 includes a light guide plate for guiding light from a backlight (not shown) disposed in the control block 100. The pixel matrix includes a wiring pattern in which gate lines and drain lines are densely arranged and pixels.

デジタイザ層207は、電子ペン15でタッチ操作をする電磁誘導式のデジタイザ・パネルを採用する。デジタイザ層207は、X方向とY方向にそれぞれ複数の検出コイルを所定のピッチで配置したコイル・アレイを含む。電子ペン15は、内蔵電池を設けてイニシエータとして電磁波を放射するアクティブ・タイプおよび内部に共振回路を設けて高周波電流が流れたコイル・アレイが放射した電磁波のエネルギーを利用して電磁波を放射するパッシブ・タイプのいずれでもよい。   The digitizer layer 207 employs an electromagnetic induction type digitizer panel that performs a touch operation with the electronic pen 15. The digitizer layer 207 includes a coil array in which a plurality of detection coils are arranged at a predetermined pitch in the X direction and the Y direction, respectively. The electronic pen 15 is an active type that radiates electromagnetic waves as an initiator by providing a built-in battery, and a passive that radiates electromagnetic waves using the energy of electromagnetic waves radiated by a coil array in which a high-frequency current flows by providing a resonance circuit inside. -Any of the types may be used.

カバー層209は、表示ブロック200の他方の面の輪郭を構成する。カバー層209はタッチ操作面を提供し、カバー層201と同様にタッチ操作が可能である。制御ブロック100は、タッチ・センサ層203に接続されたタッチ・センサ・コントローラ103、ディスプレイ層205に接続されたディスプレイ・コントローラ105、デジタイザ層207に接続されたデジタイザ・コントローラ107を含む。制御ブロック100はさらに、入力制御部111とインターフェース113を含む。   The cover layer 209 constitutes the contour of the other surface of the display block 200. The cover layer 209 provides a touch operation surface, and a touch operation is possible in the same manner as the cover layer 201. The control block 100 includes a touch sensor controller 103 connected to the touch sensor layer 203, a display controller 105 connected to the display layer 205, and a digitizer controller 107 connected to the digitizer layer 207. The control block 100 further includes an input control unit 111 and an interface 113.

制御ブロック100は、プロセッサやメモリなどのハードウェア要素と、デバイス・ドライバやファームウェアなどのソフトウェア要素で構成することができる。タッチ・センサ・コントローラ103は、タッチ・センサ層203の電極に電圧を印加してカバー層201の近辺に静電場を形成する。タッチ・センサ・コントローラ103は、カバー層201に対する指13のタッチ操作による電界または静電容量の変化を検出して座標を出力する。タッチ・センサ・コントローラ103は、カバー層201に対する電子ペン15のタッチ操作による電界または静電容量の変化を検出して座標を出力することができる。   The control block 100 can be composed of hardware elements such as a processor and a memory and software elements such as a device driver and firmware. The touch sensor controller 103 applies a voltage to the electrodes of the touch sensor layer 203 to form an electrostatic field in the vicinity of the cover layer 201. The touch sensor controller 103 detects a change in electric field or capacitance due to a touch operation of the finger 13 on the cover layer 201 and outputs coordinates. The touch sensor controller 103 can detect a change in electric field or capacitance due to a touch operation of the electronic pen 15 on the cover layer 201 and output coordinates.

電圧が印加されたタッチ・センサ層203は、ディスプレイ層205の画素マトリクスでシールドされてカバー層209の近辺には静電場を形成しない。したがって、タッチ・センサ・コントローラ103は、カバー層209に対する指13および電子ペン15によるタッチ操作の座標を検出しない。ディスプレイ・コントローラ105は、ホスト装置11から受け取った画像データでディスプレイ層205の画素マトリクスを駆動してカバー層201に正画像を表示させ、カバー層209に反転画像を表示させる。   The touch sensor layer 203 to which a voltage is applied is shielded by the pixel matrix of the display layer 205 and does not form an electrostatic field in the vicinity of the cover layer 209. Therefore, the touch sensor controller 103 does not detect the coordinates of the touch operation with the finger 13 and the electronic pen 15 on the cover layer 209. The display controller 105 drives the pixel matrix of the display layer 205 with the image data received from the host device 11 to display the normal image on the cover layer 201 and displays the inverted image on the cover layer 209.

表示ブロック200は、電磁波透過性があるため電子ペン15が放射する電磁波は、ディスプレイ層205の画素マトリクスとデジタイザ層207のコイル・アレイを突き抜けてカバー層209から出射する。デジタイザ・コントローラ107は、デジタイザ層207のコイル・アレイに流したセンス電流でカバー層201にタッチ操作をした電子ペン15の座標を出力する。デジタイザ・コントローラ107は、電子ペン15によるカバー層209に対するタッチ操作の座標も検出する。デジタイザ・コントローラ107は、表示ブロック200に設定された絶対座標に相当する信号を出力する。   Since the display block 200 is transmissive to electromagnetic waves, the electromagnetic waves emitted from the electronic pen 15 pass through the pixel matrix of the display layer 205 and the coil array of the digitizer layer 207 and are emitted from the cover layer 209. The digitizer controller 107 outputs the coordinates of the electronic pen 15 that has made a touch operation on the cover layer 201 with a sense current passed through the coil array of the digitizer layer 207. The digitizer controller 107 also detects the coordinates of the touch operation on the cover layer 209 with the electronic pen 15. The digitizer controller 107 outputs a signal corresponding to the absolute coordinates set in the display block 200.

入力制御部111は、タッチ・センサ・コントローラ103およびデジタイザ・コントローラ107から受け取った座標の相互関係を認識することができる。入力制御部111は、インターフェース111を通じてホスト装置11から受け取った画像データをディスプレイ・コントローラ105に転送する。入力制御部111はインターフェース113を通じて、タッチ・センサ・コントローラ103とデジタイザ・コントローラ107から受け取った座標をホスト装置11に送る。このとき入力制御部111は図4の手順で、デジタイザ・コントローラ107から受け取った座標の有効性を判断して所定のアクションをとる。   The input control unit 111 can recognize the mutual relationship between the coordinates received from the touch sensor controller 103 and the digitizer controller 107. The input control unit 111 transfers the image data received from the host device 11 through the interface 111 to the display controller 105. The input control unit 111 sends the coordinates received from the touch sensor controller 103 and the digitizer controller 107 to the host device 11 through the interface 113. At this time, the input control unit 111 determines the validity of the coordinates received from the digitizer controller 107 according to the procedure of FIG.

インターフェース113は、ホスト装置11と有線または無線でデータ通信をするための処理をする。入出力装置10は、電池(図示せず)や、ホスト装置11が供給する電力で動作する。ホスト装置11は、コンピュータ、ゲーム機、またはスマートフォンなどの情報処理装置に相当し、入出力装置10に表示するための画像データを生成する。ホスト装置11は、入出力装置10から受け取った座標で動作することができる。ホスト装置11は、コントロール・ブロック100に組み込むことができる。この場合、入出力装置10はまとまりのある機能を備えた情報機器または電子機器を構成する。   The interface 113 performs processing for data communication with the host device 11 in a wired or wireless manner. The input / output device 10 operates with power supplied from a battery (not shown) or the host device 11. The host device 11 corresponds to an information processing device such as a computer, a game machine, or a smartphone, and generates image data to be displayed on the input / output device 10. The host device 11 can operate with the coordinates received from the input / output device 10. The host device 11 can be incorporated in the control block 100. In this case, the input / output device 10 constitutes an information device or an electronic device having a coherent function.

[視覚透過性がない入出力装置]
図3は、本実施の形態にかかる他の入出力装置20を説明するための機能ブロック図である。入出力装置20は、図1の入出力装置10のカバー層209に代えて表示ブロック250に不透明なカバー層210を設けた点だけが異なる。したがって、表示ブロック250は、カバー層201に正画像を表示するが、カバー層210には反転画像を表示しない。表示ブロック250は,フレキシブル・タイプおよびリジッド・タイプのいずれでもよい。
[I / O device without visual transparency]
FIG. 3 is a functional block diagram for explaining another input / output device 20 according to the present embodiment. The input / output device 20 differs only in that an opaque cover layer 210 is provided on the display block 250 in place of the cover layer 209 of the input / output device 10 of FIG. Therefore, the display block 250 displays a normal image on the cover layer 201, but does not display a reverse image on the cover layer 210. The display block 250 may be either a flexible type or a rigid type.

[入出力装置10、20の動作手順]
図4は、画像を表示している入出力装置10、20に対して電子ペン15でタッチ操作をしたときの動作手順を説明するためのフローチャートである。ブロック401で入出力装置10、20に電子ペン15でタッチ操作が行われる。表示ブロック200、250がフレキシブル・タイプの場合は、図5(A)に示すように折りたまれた状態で正画像を表示するカバー層201の位置305、または図5(B)に示すように丸まった状態で正画像を表示するカバー層201の位置309にタッチ操作が行われる場合がある。
[Operation Procedure of Input / Output Devices 10 and 20]
FIG. 4 is a flowchart for explaining an operation procedure when a touch operation is performed with the electronic pen 15 on the input / output devices 10 and 20 displaying images. In block 401, the touch operation is performed on the input / output devices 10 and 20 with the electronic pen 15. When the display blocks 200 and 250 are of the flexible type, as shown in FIG. 5A, the position 305 of the cover layer 201 that displays the normal image in the folded state, as shown in FIG. A touch operation may be performed on the position 309 of the cover layer 201 that displays a normal image in a rounded state.

電子ペン15が放射する電磁波は、表示ブロック200、250を図5(A)のように折りたたんだ場合はカバー層201の位置305に入射し、図5(B)のように丸めた場合はカバー層201の位置309に入射する。入射した電磁波は、表示ブロック200、250を透過して、再び図5(A)のカバー層209、210の位置307または図5(B)のカバー層201の位置311に入射する。その結果、図5(A)のカバー層201の位置305に対するタッチ操作に応じてデジタイザ・コントローラ107は位置305、307の座標を出力する。   The electromagnetic waves emitted from the electronic pen 15 are incident on the position 305 of the cover layer 201 when the display blocks 200 and 250 are folded as shown in FIG. 5A, and when the display blocks 200 and 250 are rolled as shown in FIG. The light enters the position 309 of the layer 201. The incident electromagnetic waves are transmitted through the display blocks 200 and 250 and again enter the position 307 of the cover layers 209 and 210 in FIG. 5A or the position 311 of the cover layer 201 in FIG. 5B. As a result, the digitizer controller 107 outputs the coordinates of the positions 305 and 307 in response to a touch operation on the position 305 of the cover layer 201 in FIG.

また、図5(B)のカバー層201の位置309に対するタッチ操作に応じてデジタイザ・コントローラ107は位置309、311の座標を出力する。ここで、デジタイザ・コントローラ107が出力する座標のなかで、物理的にタッチ操作がされた位置305、309の座標をリアル座標といい、電磁波が表示ブロック200、250を突き抜けてから再び入射する位置307、311の座標をゴースト座標ということにする。   Further, the digitizer controller 107 outputs the coordinates of the positions 309 and 311 in response to a touch operation on the position 309 of the cover layer 201 in FIG. Here, among the coordinates output by the digitizer controller 107, the coordinates of the positions 305 and 309 where the touch operation is physically performed are referred to as real coordinates, and the positions where the electromagnetic waves enter the display blocks 200 and 250 and then enter again. The coordinates 307 and 311 are referred to as ghost coordinates.

反転画像も表示することができる表示ブロック200がフレキシブル・タイプの場合は、図6(A)に示すように折りたたまれた状態で反転画像を表示するカバー層209の位置313または図6(B)に示すように丸まった状態で反転画像を表示するカバー層209の位置317にタッチ操作が行われ場合がある。電子ペン15が放射する電磁波は、表示ブロック200を図6(A)のように折りたたんだ場合はカバー層209の位置313に入射し、図5(B)のように丸めた場合はカバー層209の位置317に入射する。入射した電磁波は、表示ブロック200を透過して、再びカバー層201の位置315またはカバー層209の位置319から表示ブロック200に入射する。その結果、カバー層209の位置313に対するタッチ操作に応じてデジタイザ・コントローラ107は位置313、315の座標を出力する。   When the display block 200 that can also display a reverse image is a flexible type, the position 313 of the cover layer 209 that displays the reverse image in a folded state as shown in FIG. 6A or FIG. 6B In some cases, a touch operation may be performed on the position 317 of the cover layer 209 that displays the reverse image in a rounded state as shown in FIG. When the display block 200 is folded as shown in FIG. 6A, the electromagnetic wave radiated from the electronic pen 15 enters the position 313 of the cover layer 209, and when the display block 200 is rolled as shown in FIG. 5B, the cover layer 209 is incident. Is incident on position 317. The incident electromagnetic wave passes through the display block 200 and enters the display block 200 from the position 315 of the cover layer 201 or the position 319 of the cover layer 209 again. As a result, the digitizer controller 107 outputs the coordinates of the positions 313 and 315 in response to a touch operation on the position 313 of the cover layer 209.

また、カバー層209の位置317に対するタッチ操作に応じてデジタイザ・コントローラ107は位置317、319の座標を出力する。位置313、317に対応する座標はリアル座標に相当し、位置315、319に対応する座標はゴースト座標に相当する。なお、不透明なカバー層210を備える表示ブロック250(図3)に対してタッチ操作が行われても以下の同じ手順で処理することができる。   Also, the digitizer controller 107 outputs the coordinates of the positions 317 and 319 in response to a touch operation on the position 317 of the cover layer 209. The coordinates corresponding to the positions 313 and 317 correspond to real coordinates, and the coordinates corresponding to the positions 315 and 319 correspond to ghost coordinates. Note that even if a touch operation is performed on the display block 250 (FIG. 3) including the opaque cover layer 210, it can be processed in the same procedure as described below.

表示ブロック200、250がリジッド・タイプのとき、またはタッチ操作時に平板状になっているフレキシブル・タイプのときは、図7(A)に示すように正画像を表示するカバー層201に対するタッチ操作に応じて、デジタイザ・コントローラ107はゴースト座標を出力せず、位置321のリアル座標だけを出力する。表示ブロック200がリジッド・タイプのとき、またはタッチ操作時に平板状になっているフレキシブル・タイプのときはまた、図7(B)に示すように反転画像を表示するカバー層209に対するタッチ操作に応じて、デジタイザ・コントローラ107はゴースト座標を出力せず、位置323のリアル座標だけを出力する。   When the display blocks 200 and 250 are a rigid type or a flexible type that is flat when touched, the touch operation is performed on the cover layer 201 that displays a normal image as shown in FIG. In response, the digitizer controller 107 does not output ghost coordinates, but outputs only the real coordinates of the position 321. When the display block 200 is a rigid type or a flexible type that is flat when touched, the display block 200 also responds to a touch operation on the cover layer 209 that displays a reverse image as shown in FIG. Thus, the digitizer controller 107 outputs only the real coordinates of the position 323 without outputting the ghost coordinates.

ブロック403でデジタイザ・コントローラ107は、図5〜図7に示したさまざまな態様の表示ブロック200、250に応じて、1個または複数個の座標を入力制御部111に出力する。ブロック405で、入力制御部111はデジタイザ・コントローラ107の出力に応じてタッチ・センサ・コントローラ103から座標を受け取っているか否かを判断する。座標を受け取っているときはブロック407に移行し、受け取っていないときはブロック451に移行する。ブロック451に移行するのは、図6、図7(B)に示すように反転画像も表示している表示ブロック200において、タッチ・センサ層203が座標を検出できないカバー層209に対してタッチ操作が行われた場合に相当する。   In block 403, the digitizer controller 107 outputs one or a plurality of coordinates to the input control unit 111 in accordance with the various display blocks 200 and 250 shown in FIGS. In block 405, the input control unit 111 determines whether coordinates are received from the touch sensor controller 103 according to the output of the digitizer controller 107. When the coordinates are received, the process proceeds to block 407, and when the coordinates are not received, the process proceeds to block 451. Transition to block 451 is a touch operation on the cover layer 209 where the coordinates cannot be detected by the touch sensor layer 203 in the display block 200 that also displays a reverse image as shown in FIGS. 6 and 7B. This corresponds to the case where

ブロック451で入力制御部111は、デジタイザ・コントローラ107から受け取った座標がゴースト座標を含むか否かを判断する。入力制御部111は、デジタイザ・コントローラ111から受け取った座標の数が、図6の位置313、315の座標、または位置317、319の座標のように複数個の場合はゴースト座標を含むと判断してブロック455に移行し、図7(B)の位置323の座標のように1個の場合はゴースト座標を含まないと判断してまたは当該座標がリアル座標であると判断してブロック453に移行する。   In block 451, the input control unit 111 determines whether the coordinates received from the digitizer controller 107 include ghost coordinates. The input control unit 111 determines that the number of coordinates received from the digitizer controller 111 includes ghost coordinates when there are a plurality of coordinates such as the coordinates of the positions 313 and 315 or the coordinates of the positions 317 and 319 in FIG. Then, the process proceeds to block 455, and if there is one such as the coordinates of position 323 in FIG. 7B, it is determined that the ghost coordinates are not included, or the coordinates are determined to be real coordinates, and the process proceeds to block 453. To do.

ブロック453で入力制御部111は、デジタイザ・コントローラ107から受け取った図7(B)に示す位置323の座標を有効と判断してホスト装置11に出力する。このとき、反転画像を表示するカバー層209の位置323の座標が有効になるが、図6のように画像が重なっていないため、ユーザが誤った位置を指示する可能性は低く、電子ペン15の操作を有効にしたほうが都合がよい。   In block 453, the input control unit 111 determines that the coordinates of the position 323 shown in FIG. 7B received from the digitizer controller 107 are valid and outputs them to the host device 11. At this time, the coordinates of the position 323 of the cover layer 209 for displaying the reverse image are valid, but since the images do not overlap as shown in FIG. It is convenient to enable the operation.

しかし、図6に示すような反転画像を表示するカバー層209に対するタッチ操作では、図7(B)に示すタッチ操作と異なり、正画像と反転画像が重なっている。この場合、タッチ操作を正確に行えない可能性があるため、無効にしたほうが都合がよい。ブロック455で入力制御部111は、デジタイザ・コントローラ107から受け取ったリアル座標とゴースト座標を含むすべての位置の座標313、315または位置317、319の座標を無効と判断してホスト装置11に出力しない。このときリアル座標313、317も無効になるため、ユーザは電子ペン15のタッチ操作に対する一切の応答がないことで困惑する可能性もある。   However, in the touch operation on the cover layer 209 that displays the reverse image as shown in FIG. 6, the normal image and the reverse image overlap each other, unlike the touch operation shown in FIG. In this case, there is a possibility that the touch operation cannot be performed accurately. In block 455, the input control unit 111 determines that the coordinates 313, 315 or the coordinates 317, 319 of all positions including the real coordinates and the ghost coordinates received from the digitizer controller 107 are invalid and does not output them to the host device 11. . Since the real coordinates 313 and 317 are also invalidated at this time, the user may be confused by not having any response to the touch operation of the electronic pen 15.

ブロック457で、入力制御部111は、ディスプレイ・コントローラ105に裏面タッチ操作が行われたことを示すメッセージを表示するための画像データを送る。メッセージの画像は、反転画像を表示するカバー層209に表示されるため、入力制御部111はカバー層209が正画像を表示するようにメッセージを反転して表示する画像データを送る。   In block 457, the input control unit 111 sends image data for displaying a message indicating that the back surface touch operation has been performed to the display controller 105. Since the image of the message is displayed on the cover layer 209 that displays the reverse image, the input control unit 111 sends the image data to be displayed by reversing the message so that the cover layer 209 displays the normal image.

ブロック405に戻って、タッチ・センサ層203が座標を検出することでブロック407に移行するのは、図5、図7(A)に示すように表示ブロック200、250において、タッチ・センサ層203が座標を検出できるカバー層201に電子ペン15でタッチ操作が行われた場合に相当する。ブロック407で入力制御部111は、ブロック451と同じ手順で座標の個数からゴースト座標の検出の有無を判断する。   Returning to block 405, the touch sensor layer 203 detects the coordinates and shifts to block 407 because the touch sensor layer 203 is displayed in the display blocks 200 and 250 as shown in FIGS. 5 and 7A. Corresponds to a case where a touch operation is performed with the electronic pen 15 on the cover layer 201 capable of detecting coordinates. In block 407, the input control unit 111 determines whether or not ghost coordinates are detected from the number of coordinates in the same procedure as in block 451.

図7(A)のように検出した座標の数が1個でゴースト座標が発生していないと判断する場合はブロック453に移行し、図5に示すように座標の数が複数個でゴースト座標が発生していると判断する場合はブロック409に移行する。ブロック409で入力制御部111は、タッチ・センサ・コントローラ103から受け取った座標と、デジタイザ・コントローラ107から受け取った座標を比較する。   If it is determined that the number of detected coordinates is one and no ghost coordinates are generated as shown in FIG. 7A, the process proceeds to block 453, and there are a plurality of coordinates as shown in FIG. If it is determined that the error has occurred, the process proceeds to block 409. In block 409, the input control unit 111 compares the coordinates received from the touch sensor controller 103 with the coordinates received from the digitizer controller 107.

このときの様子を図8に示す。図8は、表示ブロック200のX−Y座標系におけるデジタイザ・コントローラ107が出力した座標とタッチ・センサ・コントローラ103が出力した座標群を入力制御部111が関連付けた様子を示している。図8(A)には、デジタイザ・コントローラ107が出力した位置305、307の座標305a、307aおよびタッチ・センサ・コントローラ103が出力した座標群351を模式的に示している。図8(B)には、デジタイザ・コントローラ107が出力した位置309、311の座標309a、311aおよびタッチ・センサ・コントローラ103が出力した座標群353を模式的に示している。   The state at this time is shown in FIG. FIG. 8 shows a state where the input control unit 111 associates the coordinates output by the digitizer controller 107 in the XY coordinate system of the display block 200 with the coordinate groups output by the touch sensor controller 103. FIG. 8A schematically shows the coordinates 305 a and 307 a of the positions 305 and 307 output from the digitizer controller 107 and the coordinate group 351 output from the touch sensor controller 103. FIG. 8B schematically shows the coordinates 309 a and 311 a of the positions 309 and 311 output by the digitizer controller 107 and the coordinate group 353 output by the touch sensor controller 103.

座標群351、353は、タッチ操作をするためにカバー層201に接近した電子ペン15の輪郭に対応するもので面的な広がりがある。このとき、各座標を示す信号レベルは、指13によるタッチ操作に対応する信号レベルより低くてもよい。電子ペン15のハウジングとペン先が金属で形成されているときまたは電子ペン15の形状や操作方法によっては、座標305a、309aがそれぞれ座標群351、353に含まれる場合もある。   The coordinate groups 351 and 353 correspond to the outline of the electronic pen 15 that is close to the cover layer 201 in order to perform a touch operation, and have a wide area. At this time, the signal level indicating each coordinate may be lower than the signal level corresponding to the touch operation with the finger 13. When the housing and the pen tip of the electronic pen 15 are made of metal or depending on the shape and operation method of the electronic pen 15, the coordinates 305a and 309a may be included in the coordinate groups 351 and 353, respectively.

入力制御部111は、座標群351と座標305a、307aの距離をそれぞれ計算する。このとき座標群351の位置は、一例として重心の座標で代表させることができる。座標群353と座標309a、311aとの距離についても同様に計算することができる。入力制御部111は一例において、座標群351、353に最も距離が近い1個の座標305a、309aをリアル座標と判断し、他のすべての座標307a、311aをゴースト座標と判断する。なおゴースト座標は折曲げや丸めの状態によっては、複数個存在する場合もある。入力制御部111は、座標群351、353との距離が所定値未満であることを条件にして、1個の座標をリアル座標と判断するようにしてもよい。   The input control unit 111 calculates the distance between the coordinate group 351 and the coordinates 305a and 307a, respectively. At this time, the position of the coordinate group 351 can be represented by the coordinates of the center of gravity as an example. The distance between the coordinate group 353 and the coordinates 309a and 311a can be similarly calculated. In one example, the input control unit 111 determines one coordinate 305a, 309a closest to the coordinate group 351, 353 as a real coordinate, and determines all other coordinates 307a, 311a as ghost coordinates. There may be a plurality of ghost coordinates depending on the state of bending or rounding. The input control unit 111 may determine that one coordinate is a real coordinate on the condition that the distance to the coordinate groups 351 and 353 is less than a predetermined value.

図5に示すようなタッチ操作では、カバー層201が正画像を表示しているため、視覚透過性がある表示ブロック200であってもタッチ操作を正確に行えるので、ゴースト座標を伴うリアル座標であっても有効にしたほうが都合がよい。入力制御部111はブロック411で、座標305a、311aを有効と判断してホスト装置11に出力し、ブロック413で座標307a、311aを無効と判断してホスト装置11に出力しない。   In the touch operation as shown in FIG. 5, since the cover layer 201 displays a normal image, the touch operation can be accurately performed even with the display block 200 having visual transparency. Even if it is, it is more convenient to enable it. In block 411, the input control unit 111 determines that the coordinates 305 a and 311 a are valid and outputs them to the host apparatus 11. In block 413, the input control unit 111 determines that the coordinates 307 a and 311 a are invalid and does not output them to the host apparatus 11.

本実施の形態においては、タッチ・センサ層203が、正画像を表示するカバー層201に対する電子ペン15のタッチ操作を検出し、反転画像を表示するカバー層209に対する電子ペン15のタッチ操作を検出しないことを利用して、リアル座標とゴースト座標を区別する。したがって、タッチ・センサ層203の検出原理には、この点で静電容量式と同等の機能を発揮することができる、抵抗膜式、超音波表面弾性波方式、および光学方式などの他の方式を採用することができる。また、表示ブロック200の要素を積層する順番も、図1で示した例に限定する必要はなく、たとえば、ディスプレイ層205とデジタイザ層207の順番を入れ替えてもよい。   In the present embodiment, the touch sensor layer 203 detects the touch operation of the electronic pen 15 on the cover layer 201 that displays the normal image, and detects the touch operation of the electronic pen 15 on the cover layer 209 that displays the reverse image. The real coordinates and the ghost coordinates are distinguished by not using them. Therefore, the detection principle of the touch sensor layer 203 can exhibit the same function as the capacitance type in this respect, and other methods such as a resistive film type, an ultrasonic surface acoustic wave method, and an optical method. Can be adopted. Further, the order of stacking the elements of the display block 200 is not necessarily limited to the example shown in FIG. 1. For example, the order of the display layer 205 and the digitizer layer 207 may be switched.

図4に示した動作手順は、本発明の一例を示したものであり、本発明を限定するものではない。本発明の範囲は明細書の記述に基づいて作成した特許請求の範囲に記載のとおりである。たとえばブロック451の手順を省略して、タッチ・センサ層203が座標を検出しない場合は、ゴースト座標が発生しない場合でも、検出した座標をすべて無効にするようにしてもよい。また、ブロック457の手順は省略することもできる。   The operation procedure shown in FIG. 4 shows an example of the present invention and does not limit the present invention. The scope of the present invention is as set forth in the claims made based on the description of the specification. For example, when the procedure of block 451 is omitted and the touch sensor layer 203 does not detect the coordinates, all the detected coordinates may be invalidated even when no ghost coordinates are generated. Further, the procedure of block 457 can be omitted.

[画像反転機能を備えた入出力装置]
図9は、本実施の形態にかかる他の入出力装置30の構成を説明するための機能ブロック図である。入出力装置30が入出力装置10と異なる点は、表示ブロック260がデジタイザ層207とカバー層209の間に、タッチ・センサ・コントローラ103に接続されたタッチ・センサ層212を備えることと、制御ブロック160が入力制御部111に接続された操作ボタン261a、261bを含み画像を反転できる機能を備える点だけである。表示ブロック260は、リジッド・タイプとフレキシブル・タイプのいずれでもよい。
[Input / output device with image reversal function]
FIG. 9 is a functional block diagram for explaining a configuration of another input / output device 30 according to the present embodiment. The input / output device 30 is different from the input / output device 10 in that the display block 260 includes a touch sensor layer 212 connected to the touch sensor controller 103 between the digitizer layer 207 and the cover layer 209, and control. The block 160 includes only the operation buttons 261 a and 261 b connected to the input control unit 111 and has a function of inverting the image. The display block 260 may be either a rigid type or a flexible type.

操作ボタン261aは制御ブロック100のカバー層201側の表面に配置し、操作ボタン261bは制御ブロック100のカバー層209側の表面に配置して、ユーザが操作できるようにしている。つぎに、入出力装置30が搭載する入力制御部111の動作手順を説明する。操作ボタン261a、261bは、ユーザが正画像を表示するカバー層を切り換える際に使用する。ユーザが、対面する位置に存在する操作ボタン261a、261bを操作すると、入力制御部111は、ホスト装置11から受け取った画像データを、ユーザ側に正画像が表示されるように必要に応じて反転させてディスプレイ・コントローラ105に送る。   The operation button 261a is disposed on the surface of the control block 100 on the cover layer 201 side, and the operation button 261b is disposed on the surface of the control block 100 on the cover layer 209 side so that the user can operate. Next, an operation procedure of the input control unit 111 installed in the input / output device 30 will be described. The operation buttons 261a and 261b are used when the user switches the cover layer for displaying the normal image. When the user operates the operation buttons 261a and 261b existing at the facing positions, the input control unit 111 inverts the image data received from the host device 11 as necessary so that a normal image is displayed on the user side. To the display controller 105.

さらに入力制御部111は、反転画像を表示するカバー層201またはカバー層209の直下にあるタッチ・センサ層203またはタッチ・センサ層212を利用して、入力制御部111は図4の手順で表示ブロック200の場合と同様に電子ペン15による入力が、カバー層201に対する操作であるかカバー層209に対する操作であるかを判断することができる。操作ボタン261a、261bに代えてタッチ・センサや人感センサを設けてユーザが存在するカバー層201、209を判断してもよいし、また加速度センサを設けて常に上側に存在するカバー層201、209に正画像が表示されるようにしてもよい。   Further, the input control unit 111 uses the touch sensor layer 203 or the touch sensor layer 212 immediately below the cover layer 201 or the cover layer 209 that displays the reverse image, and the input control unit 111 displays the procedure according to the procedure of FIG. As in the case of the block 200, it can be determined whether the input by the electronic pen 15 is an operation for the cover layer 201 or an operation for the cover layer 209. Instead of the operation buttons 261a and 261b, a touch sensor or a human sensor may be provided to determine the cover layer 201 or 209 where the user exists, or an acceleration sensor may be provided to always cover the cover layer 201 that always exists on the upper side. A normal image may be displayed at 209.

[ブック・タイプの入出力装置]
図10は、本実施の形態にかかる他の入出力装置40を説明するための側面図である。入出力装置40は、フィルム状の複数の表示ブロック500a〜500eが制御ブロック170の周りを回動できるように構成している。ユーザは、本のページのように表示ブロック500a〜500eをめくって各表示ブロック500a〜500eが表示する画面を閲覧できる。表示ブロック500a〜500eの数は複数であれば特に限定しない。このような入出力装置40をブック・タイプということにする。
[Book type I / O device]
FIG. 10 is a side view for explaining another input / output device 40 according to the present embodiment. The input / output device 40 is configured such that a plurality of film-like display blocks 500 a to 500 e can rotate around the control block 170. The user can browse the screens displayed by the display blocks 500a to 500e by turning the display blocks 500a to 500e like a book page. The number of display blocks 500a to 500e is not particularly limited as long as it is plural. Such an input / output device 40 is referred to as a book type.

図11は、ブック・タイプの入出力装置40の構成を説明するための機能ブロック図である。表示ブロック500a〜500eはリジッド・タイプまたはフレキシブル・タイプのいずれでもよく、一例として、図3に示した不透明なカバー層210を備える表示ブロック250を採用することができる。また、視覚透過性のある表示ブロック200(図1)または表示ブロック260(図9)を採用するときは、接近センサやメカニカル・スイッチなどを利用した積層状態の検出機構を設けて、下層の表示ブロックが上層の表示ブロックの背景画像を表示するようにしてもよい。   FIG. 11 is a functional block diagram for explaining the configuration of the book-type input / output device 40. The display blocks 500a to 500e may be either a rigid type or a flexible type. As an example, the display block 250 including the opaque cover layer 210 shown in FIG. 3 can be adopted. In addition, when the display block 200 (FIG. 1) or the display block 260 (FIG. 9) having visual transparency is adopted, a layered state detection mechanism using a proximity sensor, a mechanical switch, or the like is provided to display a lower layer display. The block may display the background image of the upper display block.

制御ブロック170は、表示ブロック500a〜500eの構成に対応する機能を備えた複数の制御ブロック100a〜100eとページ制御部151で構成している。ページ制御部151は、ホスト装置11から受け取った画像データを複数の表示ブロック500a〜500eで表示できるようにページに区切って、制御ブロック100a〜100eに送る。たとえば表示ブロック500a〜500eがカバー層201に正画像を表示する表示ブロック200、250の場合に、ページ制御部151は、ホスト装置11から受け取った画像データを5つのページに区切って順番に1ページずつ制御ブロック100a〜100eに送る。   The control block 170 includes a plurality of control blocks 100a to 100e having a function corresponding to the configuration of the display blocks 500a to 500e and a page control unit 151. The page control unit 151 divides the image data received from the host device 11 into pages so that the image data can be displayed on the plurality of display blocks 500a to 500e, and sends the page data to the control blocks 100a to 100e. For example, when the display blocks 500a to 500e are display blocks 200 and 250 that display a normal image on the cover layer 201, the page control unit 151 divides the image data received from the host device 11 into five pages and sequentially outputs one page. Each of them is sent to the control blocks 100a to 100e.

あるいは、表示ブロック500a〜500eがカバー層201またはカバー層209に正画像を表示する表示ブロック260の場合に、ページ制御部151は、ホスト装置11から受け取った画像データを10個のページに区切って順番に奇数のページを制御ブロック100a〜100eに送る。さらに、上を向いていた任意の表示ブロックのカバー層201が下を向いたときに、先行する奇数ページに続く偶数ページの画像データを反転させて制御ブロック100a〜100eに送る。こうすることで、ユーザは本をめくるようにして右側でカバー層201に表示され、左側でカバー層209に表示された正画像をページの順番にみることができる。   Alternatively, when the display blocks 500a to 500e are display blocks 260 that display a normal image on the cover layer 201 or the cover layer 209, the page control unit 151 divides the image data received from the host device 11 into 10 pages. The odd pages are sequentially sent to the control blocks 100a to 100e. Furthermore, when the cover layer 201 of an arbitrary display block facing up faces down, the image data of the even page following the preceding odd page is inverted and sent to the control blocks 100a to 100e. By doing so, the user can view the normal images displayed on the cover layer 201 on the right side and displayed on the cover layer 209 on the left side in the order of the pages.

図12は、入出力装置40に対して電子ペン15でタッチ操作が行われるときの表示ブロック500a〜500eの様子を説明するための図である。図13は、制御ブロック170の動作手順を説明するためのフローチャートである。各制御ブロック100a〜100eの動作手順の詳細は図4のフローチャートを参考にして理解することができる。図12(A)は、5枚の表示ブロック500a〜500eが順番に平板状態で積層されている様子を示している。表示ブロック500a〜500eは、表示ブロック200、250、260のいずれかで構成していると想定する。表示ブロック500a〜500eの上側のカバー層201はそれぞれ正画像を表示している。   FIG. 12 is a diagram for explaining the appearance of the display blocks 500a to 500e when a touch operation is performed on the input / output device 40 with the electronic pen 15. FIG. FIG. 13 is a flowchart for explaining the operation procedure of the control block 170. Details of the operation procedure of each of the control blocks 100a to 100e can be understood with reference to the flowchart of FIG. FIG. 12A shows a state in which five display blocks 500a to 500e are sequentially stacked in a flat plate state. It is assumed that the display blocks 500a to 500e are configured by any one of the display blocks 200, 250, and 260. Each of the upper cover layers 201 of the display blocks 500a to 500e displays a normal image.

ブロック601で、最上位の表示ブロック500aに対してタッチ操作が行われる。ブロック603で各制御ブロック100a〜100eのデジタイザ・コントローラ107はいずれも1個の座標を検出する。しかし、表示ブロック500a〜500eが積層されている場合は、最上位に積層された表示ブロック500aに対応するタッチ・センサ・コントローラ103は座標を検出するが、それより下層の表示ブロック500b〜500eに対応するタッチ・センサ・コントローラ103は座標を検出しない。   In block 601, a touch operation is performed on the uppermost display block 500a. In block 603, the digitizer controller 107 of each of the control blocks 100a to 100e detects one coordinate. However, when the display blocks 500a to 500e are stacked, the touch sensor controller 103 corresponding to the display block 500a stacked at the highest level detects the coordinates, but the display blocks 500b to 500e below it detect the coordinates. The corresponding touch sensor controller 103 does not detect coordinates.

各制御ブロック100a〜100eの入力制御部111は、デジタイザ・コントローラ105から座標を受け取ったときに、ブロック605でそれぞれタッチ・センサ層203が座標を検出したか否かを判断する。座標を検出した制御ブロック100aの入力制御部111はブロック607でデジタイザ・コントローラ107から受け取った座標を有効と判断して出力する。また座標を検出しない制御ブロック100b〜100eの入力制御部111はブロック651でそれぞれデジタイ・コントローラ107から受け取った座標を無効と判断して出力しない。   When the input control unit 111 of each of the control blocks 100a to 100e receives coordinates from the digitizer controller 105, the input control unit 111 determines whether or not the touch sensor layer 203 has detected the coordinates in block 605. The input control unit 111 of the control block 100a that has detected the coordinates determines that the coordinates received from the digitizer controller 107 in block 607 are valid and outputs them. In addition, the input control units 111 of the control blocks 100b to 100e that do not detect coordinates determine that the coordinates received from the digitizing controller 107 in block 651 are invalid and do not output them.

図12(B)は、表示ブロック500a、500bが左側にめくられて積層された様子を示している。このとき画像の方向の反転が可能な表示ブロック260を採用していれば、表示ブロック500bのカバー層209に正画像が表示される。表示ブロック500bのカバー層209に対するタッチ操作は、制御ブロック100a、100bのタッチ・センサ層212が図13と同じ手順で処理することができる。   FIG. 12B shows a state in which the display blocks 500a and 500b are stacked on the left side. At this time, if the display block 260 capable of reversing the direction of the image is employed, a normal image is displayed on the cover layer 209 of the display block 500b. The touch operation on the cover layer 209 of the display block 500b can be processed by the touch sensor layer 212 of the control blocks 100a and 100b in the same procedure as in FIG.

これまで本発明について図面に示した特定の実施の形態をもって説明してきたが、本発明は図面に示した実施の形態に限定されるものではなく、本発明の効果を奏する限り、これまで知られたいかなる構成であっても採用することができることはいうまでもないことである。   Although the present invention has been described with the specific embodiments shown in the drawings, the present invention is not limited to the embodiments shown in the drawings, and is known so far as long as the effects of the present invention are achieved. It goes without saying that any configuration can be adopted.

10、20、30、40 入出力装置
15 電子ペン
100、160、170、100a〜100e 制御ブロック
200、250、260、500a〜500e 表示ブロック
201、209、210 カバー層
203、212 タッチ・センサ層
205 ディスプレイ層
207 デジタイザ層
10, 20, 30, 40 Input / output device 15 Electronic pen 100, 160, 170, 100a to 100e Control block 200, 250, 260, 500a to 500e Display block 201, 209, 210 Cover layer 203, 212 Touch sensor layer 205 Display layer 207 Digitizer layer

Claims (16)

一方の輪郭を形成する第1のカバー層と他方の輪郭を形成する第2のカバー層と前記第1のカバー層に対する電子ペンによるタッチ操作を検出することが可能なタッチ・センサ層と前記電子ペンが放射する電磁波を検出する電磁誘導式のデジタイザ層と前記第1のカバー層に正画像を表示するディスプレイ層とを含む電磁波透過性と可撓性を備えた表示ブロックと、
前記タッチ・センサ層が検出した座標を出力するタッチ・センサ・コントローラと
前記第1のカバー層に対する前記タッチ操作に応じて、前記第1のカバー層を透過して入射した電磁波と、前記第1のカバー層と前記第2のカバー層を透過したあとに入射した電磁波から前記デジタイザ層が検出した複数の座標を出力するデジタイザ・コントローラと、
前記タッチ・センサ・コントローラの出力に基づいて前記デジタイザ・コントローラが出力した複数の座標の有効性を判断する制御部と
を有する入出力装置。
A first cover layer forming one contour, a second cover layer forming the other contour, a touch sensor layer capable of detecting a touch operation with an electronic pen on the first cover layer, and the electronic A display block having electromagnetic wave transparency and flexibility, including an electromagnetic induction digitizer layer for detecting electromagnetic waves emitted by the pen and a display layer for displaying a positive image on the first cover layer;
A touch sensor controller that outputs coordinates detected by the touch sensor layer ;
In accordance with the touch operation on the first cover layer, electromagnetic waves that have been transmitted through the first cover layer and incident after being transmitted through the first cover layer and the second cover layer A digitizer controller for outputting a plurality of coordinates detected by the digitizer layer from:
An input / output device comprising: a control unit that determines the validity of a plurality of coordinates output by the digitizer controller based on an output of the touch sensor controller .
前記タッチ・センサ層が、指によるタッチ操作を検出することが可能な静電容量式のセンサである請求項1に記載の入出力装置。   The input / output device according to claim 1, wherein the touch sensor layer is a capacitive sensor capable of detecting a touch operation with a finger. 前記タッチ・センサ層は、前記第2のカバー層への前記タッチ操作を検出しない請求項1に記載の入出力装置。   The input / output device according to claim 1, wherein the touch sensor layer does not detect the touch operation on the second cover layer. 前記表示ブロックが、折り曲げおよび丸めが可能である請求項1に記載の入出力装置。   The input / output device according to claim 1, wherein the display block can be bent and rounded. 前記制御部は、前記タッチ・センサ層が座標を検出しかつ前記デジタイザ層が複数個の座標を検出したときに、前記タッチ・センサ層が検出した座標と前記デジタイザ層が検出した座標の距離を計算して有効性を判断する請求項1に記載の入出力装置。   When the touch sensor layer detects coordinates and the digitizer layer detects a plurality of coordinates, the control unit determines a distance between the coordinates detected by the touch sensor layer and the coordinates detected by the digitizer layer. The input / output device according to claim 1, wherein the validity is determined by calculation. 前記制御部は、前記タッチ・センサ層が検出した座標に対して最も近い位置に存在する座標を有効と判断し、その他の座標を無効と判断する請求項5に記載の入出力装置。 The input / output device according to claim 5 , wherein the control unit determines that a coordinate existing at a position closest to a coordinate detected by the touch sensor layer is valid and determines other coordinates as invalid. 前記制御部は、前記タッチ・センサ層が座標を検出しないときに前記デジタイザ層が検出した1個の座標を有効と判断する請求項1に記載の入出力装置。   The input / output device according to claim 1, wherein the control unit determines that one coordinate detected by the digitizer layer is valid when the touch sensor layer does not detect the coordinate. 前記表示ブロックが光透過率の高い材料で形成され、前記ディスプレイ層が前記第2のカバー層に反転画像を表示する請求項1に記載の入出力装置。   The input / output device according to claim 1, wherein the display block is formed of a material having a high light transmittance, and the display layer displays a reverse image on the second cover layer. 前記制御部は、前記タッチ・センサ層が座標を検出しないときに前記デジタイザ層が検出した複数の座標を無効にしたことを示す情報を前記第2のカバー層に正画像として表示するために、前記ディスプレイ層に前記情報を反転して表示するための画像データを出力する請求項8に記載の入出力装置。 The control unit displays information indicating that the plurality of coordinates detected by the digitizer layer are invalid when the touch sensor layer does not detect coordinates as a normal image on the second cover layer. The input / output device according to claim 8 , wherein the input / output device outputs image data for inverting and displaying the information on the display layer. 請求項1から請求項9のいずれかに記載の入出力装置を有する電子機器。 An electronic apparatus comprising the input / output device according to claim 1 . 一方の輪郭を形成する第1のカバー層と該第1のカバー層に対する電子ペンによるタッチ操作を検出することが可能なタッチ・センサ層と画素マトリクスと前記電子ペンが放射する電磁波を検出する電磁誘導式のデジタイザ層と他方の輪郭を形成する第2のカバー層とを含む電磁波透過性と可撓性を備えた入出力装置の動作を制御する方法であって、
前記第1のカバー層に対するタッチ操作に応じて前記第1のカバー層を透過して入射した電磁波と、前記第1のカバー層と前記第2のカバー層を透過したあとに入射した電磁波から前記デジタイザ層が複数の座標を検出するステップと、
前記タッチ操作に応じて前記タッチ・センサ層による座標の検出の有無を判断するステップと、
前記タッチ・センサ層による座標の検出の有無に応じて前記デジタイザ層が検出した複数の座標について前記タッチ操作の位置に対応する座標と前記タッチ操作の位置とは異なる位置に対応する座標を区別するステップと
を有する方法。
A first cover layer forming one contour, a touch sensor layer capable of detecting a touch operation with the electronic pen on the first cover layer, a pixel matrix, and an electromagnetic wave for detecting an electromagnetic wave radiated from the electronic pen A method of controlling the operation of an electromagnetic wave transmissive and flexible input / output device including an inductive digitizer layer and a second cover layer forming the other contour,
The electromagnetic wave incident through the first cover layer in response to a touch operation on the first cover layer and the electromagnetic wave incident after passing through the first cover layer and the second cover layer A digitizer layer detecting a plurality of coordinates;
Determining whether or not coordinates are detected by the touch sensor layer according to the touch operation;
The coordinates corresponding to the position of the touch operation and the coordinates corresponding to the position different from the position of the touch operation are distinguished from each other for the plurality of coordinates detected by the digitizer layer according to whether or not the coordinates are detected by the touch sensor layer. And a method comprising:
前記区別するステップが、前記タッチ・センサ層が座標を検出したときに前記デジタイザ層が検出した座標を有効と判断するステップを含む請求項11に記載の方法。 The method of claim 11 , wherein the distinguishing includes determining that the coordinates detected by the digitizer layer are valid when the touch sensor layer detects coordinates. 前記区別するステップが、前記デジタイザ層が検出した座標の個数が1個のときに当該座標を有効と判断するステップを含む請求項12に記載の方法。 The method according to claim 12 , wherein the step of distinguishing includes determining that the coordinates are valid when the number of coordinates detected by the digitizer layer is one. 前記区別するステップが、前記デジタイザ層が検出した座標の個数が複数個のときに前記タッチ・センサ層が検出した座標に対して最も近い位置に存在する座標を有効と判断するステップを含む請求項12に記載の方法。 The distinguishing step is claim comprising the step of determining the effective coordinates existing at the nearest position with respect to coordinates the number of coordinates where the digitizer layer is detected is detected by the touch sensor layer when the plurality 12. The method according to 12 . 前記区別するステップが、前記タッチ・センサ層が座標を検出しないときに前記デジタイザ層が検出したすべての座標を無効と判断するステップを含む請求項11に記載の方法。 The method of claim 11 , wherein the step of determining includes determining that all coordinates detected by the digitizer layer are invalid when the touch sensor layer does not detect coordinates. 前記区別するステップが、前記タッチ・センサ層が座標を検出しないときに前記デジタイザ層が検出した1個の座標を有効と判断するステップを含む請求項11に記載の方法。 12. The method of claim 11 , wherein the step of distinguishing comprises determining that one coordinate detected by the digitizer layer is valid when the touch sensor layer does not detect a coordinate.
JP2017087783A 2017-04-27 2017-04-27 INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE Active JP6474853B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017087783A JP6474853B2 (en) 2017-04-27 2017-04-27 INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017087783A JP6474853B2 (en) 2017-04-27 2017-04-27 INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE

Publications (2)

Publication Number Publication Date
JP2018185699A JP2018185699A (en) 2018-11-22
JP6474853B2 true JP6474853B2 (en) 2019-02-27

Family

ID=64355959

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017087783A Active JP6474853B2 (en) 2017-04-27 2017-04-27 INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE

Country Status (1)

Country Link
JP (1) JP6474853B2 (en)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04127315A (en) * 1990-09-19 1992-04-28 Fujitsu Ltd Personal computer
JPH09138730A (en) * 1995-11-14 1997-05-27 Sharp Corp Information input processor
JP4056618B2 (en) * 1998-04-03 2008-03-05 シチズンホールディングス株式会社 Electronics
JP2001043003A (en) * 1999-07-29 2001-02-16 Matsushita Electric Ind Co Ltd Touch panel input device
EP2261781B1 (en) * 2000-10-27 2012-10-17 Elo Touch Solutions, Inc. Dual sensor touchscreen with projective capacitive sensors and force sensors
JP2007287122A (en) * 2006-03-20 2007-11-01 Fujitsu Ltd Electronic apparatus and program
JP5783773B2 (en) * 2011-04-04 2015-09-24 シャープ株式会社 Transmission display device, display system, and display method
JP5765173B2 (en) * 2011-09-29 2015-08-19 凸版印刷株式会社 Electronic writing system
CN104115103B (en) * 2012-02-15 2017-11-24 株式会社村田制作所 Touch input terminal
JP5958215B2 (en) * 2012-09-12 2016-07-27 富士通株式会社 Information terminal device, touch coordinate determination method, and touch coordinate determination program
JP6221730B2 (en) * 2013-12-19 2017-11-01 カシオ計算機株式会社 Electronic paper system, electronic device, program
JP6425114B2 (en) * 2014-07-02 2018-11-21 Tianma Japan株式会社 Foldable display device and electric device
CN106462263B (en) * 2014-07-11 2020-07-17 株式会社和冠 Position indicator, position detection device, and input control method for position detection device

Also Published As

Publication number Publication date
JP2018185699A (en) 2018-11-22

Similar Documents

Publication Publication Date Title
EP3040828B1 (en) Touch panel and display device including the same
KR101180218B1 (en) Hand-held Device with Touchscreen and Digital Tactile Pixels
CN107148608B (en) Apparatus and method for force and proximity sensing with intermediate shield electrode layers
JP6052743B2 (en) Touch panel device and control method of touch panel device
US8415958B2 (en) Single layer capacitive image sensing
US10289199B2 (en) Haptic feedback system
JP5095805B2 (en) Force / position sensing display
JP6558704B2 (en) Reduction of display artifacts after the non-display update period
US11228096B2 (en) Position detecting device including antenna function and display device
KR20110111192A (en) Method and apparatus for implementing electrode patterns in touch panel
US20130009906A1 (en) Capacitive touch screen sensing and electric field sensing for mobile devices and other devices
JP2009009291A (en) Screen input type image display device
JPWO2009122473A1 (en) Display device, electronic device including the same, and touch panel
US8941607B2 (en) MEMS display with touch control function
CN108415631B (en) Device combined with capacitive touch sensor and manufacturing method thereof
JP2015185171A (en) Underwater operation method of camera
JP2014052995A (en) Digitizer
JP2011048541A (en) Touch panel-equipped display device
US20140145975A1 (en) Touchscreen device and screen zoom method thereof
WO2012129973A1 (en) Method of identifying multi-touch scaling gesture and device using the same
US20150378498A1 (en) Hybrid capacitive sensor device
US9280233B1 (en) Routing for touch sensor electrodes
WO2017116746A1 (en) Touch noise canceling for dot-inversion driving scheme
WO2017172159A1 (en) Per-finger force detection using segmented sensor electrodes
JP6474853B2 (en) INPUT / OUTPUT DEVICE, CONTROL METHOD, AND ELECTRONIC DEVICE

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190130

R150 Certificate of patent or registration of utility model

Ref document number: 6474853

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250