JP2010107776A - Display device - Google Patents

Display device Download PDF

Info

Publication number
JP2010107776A
JP2010107776A JP2008280346A JP2008280346A JP2010107776A JP 2010107776 A JP2010107776 A JP 2010107776A JP 2008280346 A JP2008280346 A JP 2008280346A JP 2008280346 A JP2008280346 A JP 2008280346A JP 2010107776 A JP2010107776 A JP 2010107776A
Authority
JP
Japan
Prior art keywords
invisible light
display
light
display panel
visible light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008280346A
Other languages
Japanese (ja)
Other versions
JP4457163B1 (en
Inventor
Masanori Ihara
正典 伊原
Tomohiro Omatsu
智裕 尾松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008280346A priority Critical patent/JP4457163B1/en
Priority to PCT/JP2009/063518 priority patent/WO2010050280A1/en
Priority to TW098128555A priority patent/TW201017275A/en
Application granted granted Critical
Publication of JP4457163B1 publication Critical patent/JP4457163B1/en
Publication of JP2010107776A publication Critical patent/JP2010107776A/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/13306Circuit arrangements or driving methods for the control of single liquid crystal cells
    • G02F1/13312Circuits comprising photodetectors for purposes other than feedback
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333Constructional arrangements; Manufacturing methods
    • G02F1/13338Input devices, e.g. touch panels
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333Constructional arrangements; Manufacturing methods
    • G02F1/1335Structural association of cells with optical devices, e.g. polarisers or reflectors
    • G02F1/1336Illuminating devices
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F2203/00Function characteristic
    • G02F2203/11Function characteristic involving infrared radiation
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00Aspects of the constitution of display devices
    • G09G2300/04Structural and physical details of display devices
    • G09G2300/0439Pixel structures
    • G09G2300/0452Details of colour pixel setup, e.g. pixel composed of a red, a blue and two green components
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0238Improving the black level
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0247Flicker reduction other than flicker reduction circuits used for single beam cathode-ray tubes
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/14Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/145Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen
    • G09G2360/147Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen the originated light output being determined for each pixel
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/16Calculation or use of calculated indices related to luminance levels in display data
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)
  • Position Input By Displaying (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Liquid Crystal (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To prevent black-floating when detecting an image and to prevent flickering of a screen when a detection speed is reduced. <P>SOLUTION: This display device is provided with a display panel and detects the image through the display screen of the display panel. The display device is provided with a visible light irradiating means for irradiating the outside with visible light from the display screen, a non-visible light irradiating means for irradiating the outside with non-visible light from the display screen, and a non-visible light receiving means for receiving reflected light of the non-visible light formed for each pixel of a plurality of pixels constituting the display panel. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、画像検出機能を有する表示装置に関する。   The present invention relates to a display device having an image detection function.

従来、スキャナ一体型のフラットパネルディスプレイが知られている。この装置では、画像のスキャン時、バックライト光を表示画面から透過させてスキャン対象に照射し、反射させる。このとき生じた反射光を各画素の受光素子によって検知する。これにより、フラットパネルディスプレイの画面上に配置された部材の配置面を画像としてスキャンする。こうしたディスプレイの一例が、特許文献1に開示されている。   Conventionally, a scanner-integrated flat panel display is known. In this apparatus, when scanning an image, backlight light is transmitted from the display screen to irradiate the object to be scanned and reflected. The reflected light generated at this time is detected by the light receiving element of each pixel. Thereby, the arrangement surface of the member arranged on the screen of the flat panel display is scanned as an image. An example of such a display is disclosed in Patent Document 1.

この技術を応用したタッチパネルも、従来知られている。当該タッチパネルを用いて何らかの操作を行う場合、通常、複数の異なる箇所におけるタッチを検出するいわゆるマルチタッチ検出が行われている。これによりユーザは、このタッチパネルを備えた情報処理操作をマルチタッチによって様々に操作できる。
特開平6−186585号公報(1994年7月8日公開)
A touch panel to which this technology is applied is also conventionally known. When any operation is performed using the touch panel, so-called multi-touch detection for detecting a touch at a plurality of different locations is usually performed. Accordingly, the user can perform various information processing operations including the touch panel by multi-touch.
Japanese Patent Laid-Open No. 6-186585 (published July 8, 1994)

しかし従来技術の装置では、画面表示に利用するバックライト光を画像検出にも利用するため、表示画面を暗くした状態では、タッチ点を検出するのに充分な明るさの照射光を確保できない。さらに、検出精度を安定させるためには、画面に黒色を表示する際、完全な黒色ではなく一定の輝度を有した黒色を表示する必要が生じるので、表示した黒色が浮いてしまう。   However, in the prior art apparatus, the backlight light used for screen display is also used for image detection. Therefore, when the display screen is darkened, it is not possible to secure irradiation light with sufficient brightness to detect a touch point. Furthermore, in order to stabilize the detection accuracy, when black is displayed on the screen, it is necessary to display black with a certain luminance instead of complete black, so that the displayed black floats.

また、画面に接触させた部材の形状または部材に印刷されたパターンを検出する際、画像検出のスキャン速度が遅いと画面がチラチラと点滅するため、非常に見づらくなる問題が生ずる。   Further, when detecting the shape of a member brought into contact with the screen or a pattern printed on the member, the screen blinks when the scan speed of image detection is slow, which causes a problem that it becomes very difficult to see.

本発明は上述した課題を解決するためになされたものであり、その目的は、画像検出時の黒浮きを防止すると共に検出速度低下時の画面のちらつきを防止した、画像検出機能を有する表示装置を提供することにある。   The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a display device having an image detection function that prevents black floating at the time of image detection and prevents flickering of the screen at the time of detection speed reduction. Is to provide.

本発明に係る表示装置は、上記の課題を解決するために、
表示パネルを備え、当該表示パネルの表示画面を通じて画像を検出する表示装置であって、
上記表示画面から可視光を外部に照射する可視光照射手段と、
上記表示画面から不可視光を外部に照射する不可視光照射手段と、
上記表示パネルを構成する複数の画素の画素ごとに形成された、上記不可視光の反射光を受光する不可視光受光手段とを備えていることを特徴としている。
In order to solve the above problems, a display device according to the present invention provides
A display device comprising a display panel and detecting an image through a display screen of the display panel,
Visible light irradiation means for irradiating visible light to the outside from the display screen;
Invisible light irradiation means for irradiating invisible light to the outside from the display screen;
Invisible light receiving means for receiving the reflected light of the invisible light, which is formed for each of a plurality of pixels constituting the display panel.

上記の構成によれば、表示装置は、表示パネルの表示画面を通じて照射した不可視光(たとえば赤外光または紫外光)の反射光を受光することによって、検出対象の画像を検出する。すなわち、可視光による画像検出を行わない。したがって、画面表示を暗くするために可視光のバックライト光の輝度を下げた場合でも、検出精度を安定させることが出来る。結果、表示画像の黒浮きを防止できる。また、検出速度を低下させた場合でも、検出に用いるのは画面表示には利用しない不可視光なので、画面のちらつきが起こることはない。   According to said structure, a display apparatus detects the image of a detection target by receiving the reflected light of the invisible light (for example, infrared light or ultraviolet light) irradiated through the display screen of the display panel. That is, image detection using visible light is not performed. Therefore, the detection accuracy can be stabilized even when the luminance of the backlight of visible light is lowered to darken the screen display. As a result, it is possible to prevent the display image from being black. Further, even when the detection speed is lowered, since the invisible light that is not used for the screen display is used for the detection, the screen does not flicker.

以上のように本表示装置は、画像検出時の黒浮きを防止すると共に検出速度低下時の画面のちらつきを防止することができる。   As described above, the present display device can prevent black floating at the time of image detection and also prevent flickering of the screen at the time of detection speed reduction.

本表示装置の構成は様々に変形できる。たとえば、上記可視光照射手段は、上記画素ごとに設けられた、可視光を照射する発光素子とすることが可能である。あるいは、上記可視光照射手段は、可視光を照射するバックライト部と、当該バックライト部から照射された可視光を透過させる可視光透過手段としても実現できる。   The configuration of the display device can be variously modified. For example, the visible light irradiation means may be a light emitting element that is provided for each pixel and that emits visible light. Alternatively, the visible light irradiating means can also be realized as a backlight unit that emits visible light and a visible light transmitting unit that transmits visible light emitted from the backlight unit.

また、上記不可視光照射手段は、上記画素ごとに設けられた、不可視光を照射する発光素子とすることが可能である。あるいは、上記不可視光照射手段は、不可視光を照射するバックライト部と、当該バックライト部から照射された不可視光を透過させる不可視光透過手段としても実現できる。   Further, the invisible light irradiating means may be a light emitting element that is provided for each of the pixels and emits invisible light. Alternatively, the invisible light irradiating unit can be realized as a backlight unit that irradiates invisible light and an invisible light transmitting unit that transmits the invisible light irradiated from the backlight unit.

以上のように、本発明に係る表示装置は、画像検出時の黒浮きを防止すると共に検出速度低下時の画面のちらつきを防止することができる。   As described above, the display device according to the present invention can prevent black floating at the time of image detection and also prevent flickering of the screen at the time of detection speed reduction.

本発明に係る一実施形態について、図1〜図14を参照して以下に説明する。   An embodiment according to the present invention will be described below with reference to FIGS.

(装置構成)
図2は、本発明に係る表示装置1の要部構成を示すブロック図である。この図に示すように、表示装置1は、表示パネル2、検出処理部4、表示処理部6、検出設定部8、画像解析部10、処理実行部12、および入出力部14を備えている。
(Device configuration)
FIG. 2 is a block diagram showing a main configuration of the display device 1 according to the present invention. As shown in this figure, the display device 1 includes a display panel 2, a detection processing unit 4, a display processing unit 6, a detection setting unit 8, an image analysis unit 10, a process execution unit 12, and an input / output unit 14. .

表示パネル2は画面上に文字や画像などの情報を表示するパネルであり、たとえば液晶表示パネル、有機ELパネル、プラズマディスプレイ、またはFED(フィールドエミネッセンスデスプレイ)などである。表示パネル2の詳細な内部構成は後述する。表示パネル2は画像の検出機能を有しており、表示装置1では検出処理部4が表示パネル2の画面上における画像検出を制御する。一方、表示処理部6は表示パネル2の画面上における情報表示を制御する。検出設定部8、画像解析部10、および処理実行部12については後述する。検出処理部4、表示処理部6、検出設定部8、画像解析部10、および処理実行部12は所定のドライバ回路を構成する。入出力部14は表示情報の入力、検出情報の出力および制御のための入出力を行う端子によって構成されている。   The display panel 2 is a panel that displays information such as characters and images on the screen, and is, for example, a liquid crystal display panel, an organic EL panel, a plasma display, or an FED (field emission display). The detailed internal configuration of the display panel 2 will be described later. The display panel 2 has an image detection function. In the display device 1, the detection processing unit 4 controls image detection on the screen of the display panel 2. On the other hand, the display processing unit 6 controls information display on the screen of the display panel 2. The detection setting unit 8, the image analysis unit 10, and the process execution unit 12 will be described later. The detection processing unit 4, the display processing unit 6, the detection setting unit 8, the image analysis unit 10, and the process execution unit 12 constitute a predetermined driver circuit. The input / output unit 14 is composed of terminals for inputting and outputting display information, detection information, and control.

図1は、表示パネル2の内部構成を示す図である。この図に示すように、表示パネル2はマトリックス状に配置された、表示の基本単位である複数の画素20を備えている。各画素20には、不可視光発光部22、不可視光受光部24、R発光部26、G発光部28、およびB発光部30が備えられている。   FIG. 1 is a diagram showing an internal configuration of the display panel 2. As shown in this figure, the display panel 2 includes a plurality of pixels 20 which are arranged in a matrix and are a basic unit of display. Each pixel 20 includes an invisible light emitting unit 22, an invisible light receiving unit 24, an R light emitting unit 26, a G light emitting unit 28, and a B light emitting unit 30.

不可視光発光部22はたとえば発光素子であり、表示パネル2を通じて不可視光を表示装置1の外部に向けて発する。不可視光受光部24はたとえばフォトトランジスタであり、表示パネル2に入射した不可視光を受光する。R発光部26はたとえば発光素子であり、赤色光を発する。G発光部28はたとえば発光素子であり、緑色光を発する。B発光部30はたとえば発光素子であり、青色光を発する。表示パネル2において、不可視光発光部22および不可視光受光部24は、いずれも従来の表示装置においてはシャドウマスクが形成されている箇所に配置されている。   The invisible light emitting unit 22 is, for example, a light emitting element, and emits invisible light toward the outside of the display device 1 through the display panel 2. The invisible light receiving unit 24 is, for example, a phototransistor, and receives invisible light incident on the display panel 2. The R light emitting unit 26 is a light emitting element, for example, and emits red light. The G light emitting unit 28 is a light emitting element, for example, and emits green light. The B light emitting unit 30 is a light emitting element, for example, and emits blue light. In the display panel 2, the invisible light emitting unit 22 and the invisible light receiving unit 24 are both arranged at a location where a shadow mask is formed in a conventional display device.

R発光部26、G発光部28、およびB発光部30によって、表示パネル2は、可視光による表示機能を実現する。すなわち表示パネル2は、三原色の発光部26〜30に加えて不可視光発光部22および不可視光受光部24を備えている構成である。   The display panel 2 realizes a display function using visible light by the R light emitting unit 26, the G light emitting unit 28, and the B light emitting unit 30. That is, the display panel 2 is configured to include the invisible light emitting unit 22 and the invisible light receiving unit 24 in addition to the three primary color light emitting units 26 to 30.

不可視光とは、可視光外の波長による光のことであり、具体的には、赤外光、遠赤外光、または紫外光などである。   Invisible light refers to light having a wavelength outside visible light, and specifically includes infrared light, far-infrared light, or ultraviolet light.

表示パネル2では、不可視光発光部22によって不可視光が照射される。表示パネル2の画面に不可視光を反射する部材が配置されていれば、当該部材によって当該不可視光が反射されて、表示パネル2内に戻る。この反射不可視光は不可視光受光部24に到達し、結果、不可視光受光部24によって反射不可視光の輝度が検出される。表示パネル2においては不可視光受光部24が二次元平面状に形成されているので、各不可視光受光部24の出力を処理することによって、表示パネル2の画面を通じて画像を検出できる。   In the display panel 2, invisible light is irradiated by the invisible light emitting unit 22. If a member that reflects invisible light is disposed on the screen of the display panel 2, the invisible light is reflected by the member and returns to the display panel 2. The reflected invisible light reaches the invisible light receiving unit 24, and as a result, the brightness of the reflected invisible light is detected by the invisible light receiving unit 24. Since the invisible light receiving unit 24 is formed in a two-dimensional plane in the display panel 2, an image can be detected through the screen of the display panel 2 by processing the output of each invisible light receiving unit 24.

以上のように、表示装置1は、表示パネル2の画面において不可視光を用いて画像を検出する。したがって、可視光の輝度が低くても安定した検出が可能になるため、従来技術において発生していた黒浮きを回避することができる。また、検出速度を低下させた場合でも、検出に用いるのは画面表示には利用しない不可視光なので、画面のちらつきが起こることはない。   As described above, the display device 1 detects an image using invisible light on the screen of the display panel 2. Therefore, since stable detection is possible even when the luminance of visible light is low, it is possible to avoid black floating that has occurred in the prior art. Further, even when the detection speed is lowered, since the invisible light that is not used for the screen display is used for the detection, the screen does not flicker.

(検出設定処理)
表示装置1は、各画素20に配置された不可視光検出部によって、各画素に入射した不可視光の輝度を検出する。この検出結果に応じて、表示パネル2の画面におけるタッチ位置を特定し、当該タッチ位置における画像を検出する。
(Detection setting process)
In the display device 1, the invisible light detection unit disposed in each pixel 20 detects the luminance of the invisible light incident on each pixel. According to this detection result, a touch position on the screen of the display panel 2 is specified, and an image at the touch position is detected.

表示パネル2の周囲が一定以上の明るさを有していれば、表示パネル2においてタッチされている箇所は、タッチされていない箇所よりも暗くなる。一方、表示パネル2の周囲が一定以上の暗さを有していれば、表示パネル2においてタッチされている箇所には不可視光発光部22から照射され照射対象によって反射された不可視光が入射するので、この分、表示パネル2においてタッチされている箇所は、タッチされていない箇所よりも明るくなる。   If the periphery of the display panel 2 has a certain brightness or more, the touched portion on the display panel 2 becomes darker than the touched portion. On the other hand, if the periphery of the display panel 2 is darker than a certain level, invisible light that is irradiated from the invisible light emitting unit 22 and reflected by the irradiation target is incident on the touched portion of the display panel 2. Therefore, the part touched on the display panel 2 is brighter than the part not touched.

以上の状況を考慮して、表示装置1は、表示パネル2におけるタッチ位置の検出方法を、表示パネル2の画面全体の輝度値に応じて設定する。図3は、表示装置1においてタッチ位置の検出方法を決定する際の処理の流れを示すフローチャートである。まず、検出処理部4が、表示パネル2を構成する画素ごとの輝度を検出する(ステップS1)。次に、検出処理部4は、検出した画素ごとの輝度に基づき画面全体の輝度を算出する(ステップS2)。このときたとえば各輝度の合計値または平均値などを、画面全体の輝度とする。そして、検出設定部8が、画面全体の輝度が、予め定められた基準値を超えているか否かを判定する(ステップS3)。   In consideration of the above situation, the display device 1 sets a touch position detection method on the display panel 2 according to the luminance value of the entire screen of the display panel 2. FIG. 3 is a flowchart showing the flow of processing when determining the touch position detection method in the display device 1. First, the detection processing unit 4 detects the luminance for each pixel constituting the display panel 2 (step S1). Next, the detection processing unit 4 calculates the luminance of the entire screen based on the detected luminance for each pixel (step S2). At this time, for example, a total value or an average value of each luminance is set as the luminance of the entire screen. And the detection setting part 8 determines whether the brightness | luminance of the whole screen exceeds the predetermined reference value (step S3).

ステップS3における判定の結果が「偽」であるとき(NO)、検出設定部8は、画面輝度よりも暗い輝度の画素をタッチされた点として検出するように設定する(ステップS4)。一方、ステップS3における判定の結果が「真」であるとき(YES)、検出設定部8は、画面輝度よりも明るい輝度の画素をタッチされた点として検出するように設定する(ステップS5)。   When the result of determination in step S3 is “false” (NO), the detection setting unit 8 sets so as to detect a pixel having a luminance lower than the screen luminance as a touched point (step S4). On the other hand, when the result of determination in step S3 is “true” (YES), the detection setting unit 8 performs setting so as to detect a pixel having a brightness brighter than the screen brightness as a touched point (step S5).

以上に説明した設定処理によって、表示装置1は、表示パネル2におけるタッチ位置を、周囲の明るさに関わらず正しく検出できる。   Through the setting process described above, the display device 1 can correctly detect the touch position on the display panel 2 regardless of the surrounding brightness.

なお、表示装置1は、表示パネル2の画面全体に対して一律に検出方法を設置するのではなく、画面全体を複数の領域に分割して、当該領域ごとに検出方法を設定してもよい。この場合、領域ごとに当該領域に含まれる各画素を通じて検出した各反射不可視光の輝度に基づき、領域全体の輝度を算出する。そして、当該算出した輝度と基準輝度とを比較し、比較結果に応じて当該領域における検出方法を設定する。   In addition, the display apparatus 1 may divide the entire screen into a plurality of regions and set the detection method for each region instead of uniformly setting the detection method for the entire screen of the display panel 2. . In this case, the luminance of the entire region is calculated based on the luminance of each reflected invisible light detected through each pixel included in the region for each region. Then, the calculated luminance and the reference luminance are compared, and a detection method in the region is set according to the comparison result.

さらに、検出された輝度に応じて一定のバイアスをかけて検出感度を調節することによって、検出の精度を改善することもできる。あるいは、不可視光発光部22によって照射される不可視光の照射輝度を変化させると共に、検出基準を変化させることによって、外乱光に対する検出耐性を向上させることもできる。   Furthermore, the detection accuracy can be improved by adjusting the detection sensitivity by applying a constant bias according to the detected luminance. Alternatively, the detection resistance against disturbance light can be improved by changing the irradiation luminance of the invisible light emitted by the invisible light emitting unit 22 and changing the detection reference.

(ユーザーインタフェースとしての適用例)
表示装置1のユーザは、たとえば、ペン先が不可視光を反射する素材によって出来ている専用ペンを用いて、表示パネル2の画面をタッチする。このとき表示装置1は、上述した検出処理を行うことによってタッチ位置を検出する。また、タッチ位置の変化を検出することによって、検出結果に基づく処理を実行することもできる。このようにして、ユーザは専用ペンを用いて表示装置1を操作することができる。
(Application example as user interface)
The user of the display device 1 touches the screen of the display panel 2 using, for example, a dedicated pen whose pen tip is made of a material that reflects invisible light. At this time, the display device 1 detects the touch position by performing the detection process described above. In addition, processing based on the detection result can be executed by detecting a change in the touch position. In this way, the user can operate the display device 1 using the dedicated pen.

ユーザは、上述した専用ペンに限らず、他の形態の操作デバイスを用いて表示装置1を操作することもできる。その一例を図4に示す。図4は、ダイヤル状の操作デバイス101、およびカード状の操作デバイス102が画面上に配置された状態の表示装置1を示す図である。表示パネル2の画面上に、操作デバイス101および102が配置されている。ユーザがこれらの操作デバイスを動かすことによって、当該デバイスの表面部分の検出結果に基づく操作が可能になる。また、不可視光を反射する素材を指先に付けたグロ−ブなどを用いて、マルチタッチユーザーインタフェースを実現してもよい。さらに、カードなどに印刷された不可視光反射画像をバーコード(二次元含む)やスティガノグラフなどによって構成し、それら画像に埋め込まれたURLなどに基づいて、別途設けられた通信回線を経由してウェブサイトや電子書籍などにアクセスできるようにしてもよい。   The user can operate the display device 1 using not only the dedicated pen described above but also another type of operation device. An example is shown in FIG. FIG. 4 is a diagram showing the display device 1 in a state where the dial-like operation device 101 and the card-like operation device 102 are arranged on the screen. On the screen of the display panel 2, operation devices 101 and 102 are arranged. When the user moves these operation devices, an operation based on the detection result of the surface portion of the devices becomes possible. Further, a multi-touch user interface may be realized by using a globe or the like with a material that reflects invisible light attached to a fingertip. Furthermore, the invisible light reflection image printed on the card or the like is configured by a barcode (including two-dimensional), a stiganograph, etc., and via a separately provided communication line based on the URL embedded in the image. You may be able to access websites and electronic books.

より具体的には、表示パネル2の画面上に複数のダイヤル状の操作デバイス101を置いて操作したり、画面上に複数のカード状の操作デバイス102を置いて操作を行ったりすることができる。ユーザが複雑なダイヤル操作またはカード操作を複数同時に行ったとしても、表示装置1は、前述の不可視光によるパターン検出を操作デバイスごとに行えるので、操作を行っている複数のデバイスを弁別することできる。   More specifically, it is possible to operate by placing a plurality of dial-like operation devices 101 on the screen of the display panel 2 or by placing a plurality of card-like operation devices 102 on the screen. . Even if the user performs a plurality of complicated dial operations or card operations at the same time, the display device 1 can perform pattern detection using the invisible light described above for each operation device, so that a plurality of devices performing the operation can be distinguished. .

図5は、操作デバイス101による操作の様子の一例を示す図である。この図に示すようにユーザが操作デバイス101を回転させたり、あるいは画面上において上下左右に動かしたりすると、これらの動きの変化を表示装置1が検出する。そして、検出結果に応じた処理を実行することによって、ユーザによる操作を実現する。   FIG. 5 is a diagram illustrating an example of a state of operation by the operation device 101. As shown in this figure, when the user rotates the operation device 101 or moves it up, down, left, or right on the screen, the display device 1 detects changes in these movements. And operation by a user is realized by performing processing according to a detection result.

操作デバイス101および102の表面(表示パネル2の画面に配置される面)には、不可視光を反射する素材によって構成された特定のパターンが形成されている。表示装置1は、このパターンの向きや位置の変化を検出する。そして、検出結果に応じて、表示画像の移動、回転、拡大、または縮小などの処理を実行する。   A specific pattern made of a material that reflects invisible light is formed on the surfaces of the operation devices 101 and 102 (surfaces arranged on the screen of the display panel 2). The display device 1 detects a change in the direction and position of this pattern. Then, processing such as movement, rotation, enlargement, or reduction of the display image is executed according to the detection result.

図6は、操作デバイス101の表面に形成されているパターンの一例を示す図である。この図には、操作デバイス101の変形例として操作デバイス101aおよび101bを示す。操作デバイス101aの表面105(表示パネル2の画面に直接向き合う面)には、パターン104が形成されている。一方、操作デバイス101bの表面105には別のパターン104が形成されている。図6のパターン104は単純な画像であるが、これはあくまで一例に過ぎず、パターン104は任意の図形として形成可能である。たとえば、二次元バーコード、一般的なバーコード、または放射状同心バーコードなどの幾何学模様であってもよい。これらのバーコードであれば後述するID検出を行いやすいので好ましい。   FIG. 6 is a diagram illustrating an example of a pattern formed on the surface of the operation device 101. In this figure, operation devices 101 a and 101 b are shown as modifications of the operation device 101. A pattern 104 is formed on the surface 105 (the surface directly facing the screen of the display panel 2) of the operation device 101a. On the other hand, another pattern 104 is formed on the surface 105 of the operation device 101b. The pattern 104 in FIG. 6 is a simple image, but this is only an example, and the pattern 104 can be formed as an arbitrary figure. For example, it may be a geometric pattern such as a two-dimensional barcode, a general barcode, or a radial concentric barcode. These bar codes are preferable because ID detection described later can be easily performed.

(アンテナ部の利用)
表示パネル1上に、アンテナ部106aまたは106bを備えてもよい。図7にその一例を示す。図7は、表示パネル1上に、操作デバイスやRFIDとの通信・給電を行うアンテナ部106aまたは106bが備えられた構成の表示装置1を示す図である。この図において、アンテナ部106aはICカードタイプのアンテナであり、一方、106bは誘電型タブレットタイプのアンテナである。図7の例では、ユーザは、操作デバイス101cを画面上に配置して操作する。操作デバイス101cはたとえばホイール操作またはボタン操作可能なマウスである。操作デバイス101cは、アンテナ部106aまたは106bから出力される無線によって、電力の供給を受ける。一方、表示装置1は、操作デバイス101cから出力される無線をアンテナ部106aまたは106bを通じて受信することにとて、操作デバイス101cから情報を取得する。
(Use of antenna part)
An antenna portion 106a or 106b may be provided on the display panel 1. An example is shown in FIG. FIG. 7 is a diagram illustrating the display device 1 having a configuration in which an antenna unit 106a or 106b that performs communication / power feeding with an operation device or an RFID is provided on the display panel 1. In this figure, the antenna portion 106a is an IC card type antenna, while 106b is a dielectric tablet type antenna. In the example of FIG. 7, the user operates the operation device 101c by placing it on the screen. The operation device 101c is, for example, a mouse capable of wheel operation or button operation. The operation device 101c is supplied with power by radio output from the antenna unit 106a or 106b. On the other hand, the display device 1 acquires information from the operation device 101c by receiving the radio output from the operation device 101c through the antenna unit 106a or 106b.

図7のような構成にすることで、表示装置1におけるユーザーインタフェースの利便性をより高められることができる。なお表示装置1は、RFタグなどを用いた無線通信によって、操作デバイスの種類またはその操作状態を検出してもよい。   With the configuration as shown in FIG. 7, the convenience of the user interface in the display device 1 can be further enhanced. The display device 1 may detect the type of operation device or the operation state thereof by wireless communication using an RF tag or the like.

また操作デバイスは、アンテナ部106,106bによる誘電に伴い電力を供給され、この電力を用いて不可視光を表示パネル2の画面に向けて発光する構成であってもよい。表示装置1では当該操作デバイスの使用に基づくグラフィカルユーザーインタフェースを実現でき、結果、ユーザは当該操作デバイスを用いることによって、表示装置を適宜操作できる。   Further, the operation device may be configured to be supplied with electric power along with the dielectric by the antenna units 106 and 106b and to emit invisible light toward the screen of the display panel 2 using this electric power. The display device 1 can realize a graphical user interface based on the use of the operation device. As a result, the user can appropriately operate the display device by using the operation device.

(メニュー表示)
図8は、操作デバイス101の操作結果に応じてメニュー107の表示状態を変化させる例を説明する図である。
(Menu display)
FIG. 8 is a diagram illustrating an example in which the display state of the menu 107 is changed according to the operation result of the operation device 101.

操作デバイス101には、予め、メニュー107が関連付けられている。ユーザが操作デバイス101を操作したとき、表示装置1は、その操作状態を操作デバイス101の表面画像を検出することによって特定する。そして、特定した結果に基づきメニュー107の表示状態を変化させる。たとえば操作デバイス101を移動したことを検出した場合には、その移動に応じてメニュー107を移動する。また、操作デバイスを回転したことを検出した場合には、その回転量や回転速度に合わせてメニュー107を回転表示する。これにより、操作デバイス101によるユーザーインタフェースの利便性をより高められる。また、操作デバイス101に操作用の部品(ボタンまたはホイール等)が備えられていれば、これの操作に応じてメニュー107そのものまたはメニュー107に含まれる項目の表示状態を変化させてもよい。   A menu 107 is associated with the operation device 101 in advance. When the user operates the operation device 101, the display device 1 specifies the operation state by detecting the surface image of the operation device 101. Then, the display state of the menu 107 is changed based on the identified result. For example, when it is detected that the operation device 101 has been moved, the menu 107 is moved in accordance with the movement. If it is detected that the operation device has been rotated, the menu 107 is rotated and displayed in accordance with the rotation amount and rotation speed. Thereby, the convenience of the user interface by the operation device 101 can be further enhanced. Further, if the operation device 101 includes operation parts (buttons or wheels), the menu 107 itself or the display state of the items included in the menu 107 may be changed according to the operation.

(処理の一例)
図9は、操作デバイス101を用いた操作時に応じて表示装置1が実行する処理の流れを示すフローチャートである。
(Example of processing)
FIG. 9 is a flowchart showing a flow of processing executed by the display device 1 in response to an operation using the operation device 101.

まず、検出処理部4が、表示パネル2の画面上に配置された操作デバイス101の表面(配置面)に形成されている画像パターン104を検出する(ステップS11)。次に画像解析部10が、検出された画像パターン104から、操作に用いた操作デバイスのIDを検出する(ステップS12)。表示装置1ではパターンごとにIDが予め互いに関連付けられてメモリに保存されているので、この対応関係に基づき検出パターンからIDを特定する。IDを検出したあと、画像解析部10は、パターン104を解析することによって、その向きを検出する(ステップS13)。検出されたIDおよび向きに応じて、表示処理部6が、ユーザが操作するためのメニューなどの情報108を操作デバイス101の近くに表示する(ステップS14)。   First, the detection processing unit 4 detects the image pattern 104 formed on the surface (arrangement surface) of the operation device 101 arranged on the screen of the display panel 2 (step S11). Next, the image analysis unit 10 detects the ID of the operation device used for the operation from the detected image pattern 104 (step S12). In the display device 1, the ID is associated with each pattern in advance and stored in the memory, so the ID is specified from the detection pattern based on this correspondence. After detecting the ID, the image analysis unit 10 detects the direction by analyzing the pattern 104 (step S13). In accordance with the detected ID and orientation, the display processing unit 6 displays information 108 such as a menu for the user to operate near the operation device 101 (step S14).

ここで操作デバイス101にスイッチなどの操作部があれば、表示装置1は、当該操作部の状態をアンテナ部106a,106bを経由して受信し、メニュー表示108に反映させてもよい。ユーザは、操作デバイス101として、ダイヤル型に限らず、カード型(部材102)、ペン型(傾斜により操作を変えるなど)など任意のものを利用できる。   If the operation device 101 includes an operation unit such as a switch, the display device 1 may receive the state of the operation unit via the antenna units 106 a and 106 b and reflect the received state on the menu display 108. The user can use not only the dial type but also a card type (member 102), a pen type (such as changing the operation by tilting) as the operation device 101.

次に、検出処理部4が、表示された情報に対するユーザの操作を検出する(ステップS15)。この検出結果に基づき、処理実行部12が、ユーザの操作に応じた処理を実行する(ステップS16)。   Next, the detection processing unit 4 detects a user operation on the displayed information (step S15). Based on this detection result, the process execution part 12 performs the process according to a user's operation (step S16).

表示装置1では、照射する不可視光に特定の周波数による変調を加えてもよい。このとき、表示画面を当該変調周波数の不可視光のみを透過できるように構成しておく。これにより、外乱光に対する検出耐性をより向上できるので、表示装置1を屋外において利用する際の検出性能を改善することができる。また、不可視光受光部24は、可視光から不可視光にまたがる幅の広い帯域に対する受光感度を持つ素子であってもよい。   In the display device 1, the invisible light to be irradiated may be modulated with a specific frequency. At this time, the display screen is configured to transmit only invisible light of the modulation frequency. Thereby, since the detection tolerance with respect to disturbance light can be improved more, the detection performance at the time of utilizing the display apparatus 1 outdoors can be improved. Further, the invisible light receiving unit 24 may be an element having light receiving sensitivity for a wide band extending from visible light to invisible light.

表示パネル2上に置かれた操作デバイス101から検出したパターン104の高周波成分を評価することにより、表示パネル2の画面から操作デバイス101までの距離を推定することができる。具体的には、検出画像の輪郭の明瞭さに基づき高周波成分を測定する。輪郭が明瞭であればあるほど高周波成分は多くなり、逆に輪郭がぼければぼけるほど高周波成分は少なくなる。こうして測定した高周波成分に応じて、表示パネル2の画面から操作デバイス101までの距離を測定する。   By evaluating the high frequency component of the pattern 104 detected from the operation device 101 placed on the display panel 2, the distance from the screen of the display panel 2 to the operation device 101 can be estimated. Specifically, the high frequency component is measured based on the clarity of the outline of the detected image. The clearer the contour, the higher the high-frequency component, and vice versa. The distance from the screen of the display panel 2 to the operation device 101 is measured according to the high frequency component thus measured.

また、不可視光を反射する蛍光剤を含んだペンを用いれば、表示パネル2の画面上に文字または図形を描くことができる。したがって、ユーザが描画した文字や図形をスキャンし画像データとして保存したり、当該文字または図形を認識したりすることによって、表示装置1を電子ホワイトボードとして実現できる。   Moreover, if a pen containing a fluorescent agent that reflects invisible light is used, characters or figures can be drawn on the screen of the display panel 2. Therefore, the display device 1 can be realized as an electronic whiteboard by scanning a character or graphic drawn by the user and storing it as image data or by recognizing the character or graphic.

ユーザが操作する操作デバイスは上述したダイヤル状の操作デバイス101またはカード状の操作デバイス102に限らず、ペン型、マウス型、トラックボール状、消しゴム状、またはクリーナ状であってもよい。これらの操作デバイスに所定の操作部が設けられていれば、その操作に基づき変化した状態を情報として表示装置1に送信し、ユーザーインタフェースの表示状態を変化させることによって、ユーザーインタフェースの利便性をより向上することができる。   The operation device operated by the user is not limited to the dial-shaped operation device 101 or the card-shaped operation device 102 described above, but may be a pen type, a mouse type, a trackball shape, an eraser shape, or a cleaner shape. If these operation devices are provided with a predetermined operation unit, the state changed based on the operation is transmitted to the display device 1 as information, and the display state of the user interface is changed, thereby improving the convenience of the user interface. It can be improved further.

(表示装置1の変形例)
本発明の表示装置1に備えられる表示パネル2は、図1に示す構成に限定されず、他の様々な構成をとることができる。その例を図10〜図14に示す。
(Modification of display device 1)
The display panel 2 provided in the display device 1 of the present invention is not limited to the configuration shown in FIG. 1 and can have various other configurations. Examples thereof are shown in FIGS.

図10は、本発明の他の構成に係る表示パネル2aを示す図である。この図に示すように、表示パネル2aはマトリックス状に配置された複数の画素20aを備えている。各画素20aには、不可視光発光部22、不可視光受光部24、R透過部32、G透過部34、およびB透過部36が備えられている。表示パネル2aにはバックライト部が備えられており、このバックライト部は可視光(赤色光、緑色光、および青色光)を照射する。この可視光のうち特定の光がR透過部32、G透過部34、またはB透過部36を透過して画面外に向かって放出される。これにより、表示パネル2aの画面から可視光および不可視光を照射することができる。   FIG. 10 is a diagram showing a display panel 2a according to another configuration of the present invention. As shown in this figure, the display panel 2a includes a plurality of pixels 20a arranged in a matrix. Each pixel 20 a includes an invisible light emitting unit 22, an invisible light receiving unit 24, an R transmitting unit 32, a G transmitting unit 34, and a B transmitting unit 36. The display panel 2a is provided with a backlight unit, and this backlight unit emits visible light (red light, green light, and blue light). Among the visible light, specific light is transmitted through the R transmission part 32, the G transmission part 34, or the B transmission part 36 and emitted toward the outside of the screen. Thereby, visible light and invisible light can be irradiated from the screen of the display panel 2a.

図11は、本発明の他の構成に係る表示パネル2bを示す図である。この図に示すように、表示パネル2bはマトリックス状に配置された複数の画素20bを備えている。各画素20bには、不可視光透過部38、不可視光受光部24、R発光部26、G発光部28、およびB発光部30が備えられている。表示パネル2bにはバックライト部が備えられており、このバックライト部は不可視光を照射する。この不可視光が不可視光透過部38を透過して画面外に向かって放出される。これにより、表示パネル2bの画面から可視光および不可視光を照射することができる。   FIG. 11 is a diagram showing a display panel 2b according to another configuration of the present invention. As shown in this figure, the display panel 2b includes a plurality of pixels 20b arranged in a matrix. Each pixel 20 b includes an invisible light transmitting portion 38, an invisible light receiving portion 24, an R light emitting portion 26, a G light emitting portion 28, and a B light emitting portion 30. The display panel 2b is provided with a backlight unit, and this backlight unit emits invisible light. This invisible light is transmitted through the invisible light transmitting portion 38 and emitted toward the outside of the screen. Thereby, visible light and invisible light can be irradiated from the screen of the display panel 2b.

図12は、本発明の他の構成に係る表示パネル2cを示す図である。この図に示すように、表示パネル2cはマトリックス状に配置された複数の画素20cを備えている。各画素20cには、不可視光透過部38、不可視光受光部24、R透過部32、G透過部34、およびB透過部36が備えられている。表示パネル2cにはバックライト部が備えられており、このバックライト部は可視光(赤色光、緑色光、および赤色光)および不可視光を照射する。この可視光のうち特定の光がR透過部32、G透過部34、またはB透過部36を透過して画面外に向かって放出される。また、不可視光は不可視光透過部38を透過して画面外に向かって放出される。これらの構成により、表示パネル2cの画面から可視光および不可視光を照射することができる。   FIG. 12 is a diagram showing a display panel 2c according to another configuration of the present invention. As shown in this figure, the display panel 2c includes a plurality of pixels 20c arranged in a matrix. Each pixel 20c is provided with an invisible light transmitting portion 38, an invisible light receiving portion 24, an R transmitting portion 32, a G transmitting portion 34, and a B transmitting portion 36. The display panel 2c is provided with a backlight unit, which irradiates visible light (red light, green light, and red light) and invisible light. Among the visible light, specific light is transmitted through the R transmission part 32, the G transmission part 34, or the B transmission part 36 and emitted toward the outside of the screen. Further, the invisible light is transmitted through the invisible light transmitting portion 38 and emitted toward the outside of the screen. With these configurations, visible light and invisible light can be irradiated from the screen of the display panel 2c.

図13は、本発明の他の構成に係る表示パネル2dを示す図である。この図に示すように、表示パネル2dはマトリックス状に配置された複数の画素20cを備えている。各画素20dには、不可視光受光部24、R透過部32、G透過部34、およびB透過部36が備えられている。また、各画素20dをまたがって不可視光透過部40が形成されている。不可視光透過部40は従来の表示パネルにおけるシャドウマスクの形成箇所に形成されている。   FIG. 13 is a diagram showing a display panel 2d according to another configuration of the present invention. As shown in this figure, the display panel 2d includes a plurality of pixels 20c arranged in a matrix. Each pixel 20d includes an invisible light receiving unit 24, an R transmission unit 32, a G transmission unit 34, and a B transmission unit 36. Further, an invisible light transmitting portion 40 is formed across each pixel 20d. The invisible light transmitting portion 40 is formed at a location where a shadow mask is formed in a conventional display panel.

表示パネル2dにはバックライト部42が備えられている。図14は、バックライト部42の構成を示す図である。この図に示すように、バックライト部42は、R光源44、G光源46、B光源48、および不可視光光源50を備えている。R光源44は赤色光を照射する。G光源46は緑色光を照射する。B光源48は青色光を照射する。不可視光光源50は不可視光を照射する。これにより、バックライト部42は可視光および不可視光を照射する。この可視光のうち特定の光がR透過部32、G透過部34、またはB透過部36を透過して画面外に向かって放出される。また、不可視光は不可視光透過部38を透過して画面外に向かって放出される。これらの構成により、表示パネル2dの画面から可視光および不可視光を照射することができる。   The display panel 2d includes a backlight unit 42. FIG. 14 is a diagram illustrating a configuration of the backlight unit 42. As shown in this figure, the backlight unit 42 includes an R light source 44, a G light source 46, a B light source 48, and an invisible light source 50. The R light source 44 emits red light. The G light source 46 emits green light. The B light source 48 emits blue light. The invisible light source 50 emits invisible light. Thereby, the backlight part 42 irradiates visible light and invisible light. Among the visible light, specific light is transmitted through the R transmission part 32, the G transmission part 34, or the B transmission part 36 and emitted toward the outside of the screen. Further, the invisible light is transmitted through the invisible light transmitting portion 38 and emitted toward the outside of the screen. With these configurations, visible light and invisible light can be irradiated from the screen of the display panel 2d.

表示装置1は、図10〜図14に示すいずれの構成の表示パネルを備えた場合でも、図1に示す構成の表示パネル2を備えた場合と同等の作用効果を奏する。   Even when the display device 1 includes the display panel having any configuration illustrated in FIGS. 10 to 14, the display device 1 has the same effects as the display panel 2 having the configuration illustrated in FIG. 1.

表示パネル2〜2dのいずれにおいても、不可視光透過部38として不可視光を透過するシャドウマスクを備えていてもよい。また、不可視光発光部22または不可視光受光部24をシャドウマスクとして形成してもよい。また、不可視光発光部22が各画素にまたがって形成されていてもよい。   In any of the display panels 2 to 2 d, a shadow mask that transmits invisible light may be provided as the invisible light transmitting portion 38. Further, the invisible light emitting part 22 or the invisible light receiving part 24 may be formed as a shadow mask. Moreover, the invisible light emission part 22 may be formed ranging over each pixel.

なお、本発明は上述した各実施形態に限定されるものではない。当業者は、請求項に示した範囲内において、本発明をいろいろと変更できる。すなわち、請求項に示した範囲内において、適宜変更された技術的手段を組み合わせれば、新たな実施形態が得られる。   The present invention is not limited to the above-described embodiments. Those skilled in the art can make various modifications to the present invention within the scope of the claims. That is, a new embodiment can be obtained by combining appropriately changed technical means within the scope of the claims.

(その他の構成)
なお、本発明を、以下の構成としても実現できる。
(Other configurations)
In addition, this invention is realizable also as the following structures.

(第1構成)
透過型基板上に形成される不可視光発光部と一つの画素ごとに独立した可視光発光部と不可視光受光部とを備えることを特徴とするフラットパネルディスプレイ装置。
(First configuration)
A flat panel display device comprising: an invisible light emitting portion formed on a transmissive substrate; a visible light emitting portion and an invisible light receiving portion independent for each pixel.

(第2構成)
透過型基板上に形成される不可視光発光部と一つの画素ごとに独立した可視光透過部と不可視光受光部とを備えることを特徴とするフラットパネルディスプレイ装置。
(Second configuration)
A flat panel display device comprising an invisible light emitting portion formed on a transmissive substrate, a visible light transmitting portion and an invisible light receiving portion independent for each pixel.

(第3構成)
透過型基板上に形成される不可視光透過部と一つの画素ごとに独立した可視光発光部と不可視光受光部とを備えることを特徴とするフラットパネルディスプレイ装置。
(Third configuration)
A flat panel display device comprising an invisible light transmitting portion formed on a transmissive substrate, a visible light emitting portion and an invisible light receiving portion independent for each pixel.

(第4構成)
透過型基板上に形成される不可視光透過部と一つの画素ごとに独立した可視光透過部と不可視光受光部とを備えることを特徴とするフラットパネルディスプレイ装置。
(Fourth configuration)
A flat panel display device comprising: an invisible light transmitting portion formed on a transmissive substrate; a visible light transmitting portion independent of each pixel; and an invisible light receiving portion.

(第5構成)
前記不可視光透過部または前記不可視光発光部から発光された不可視光を反射することを特徴とする部材と前記不可視光を反射することを特徴とする前記部材によって反射された不可視光を不可視光受光部によって受光してパターン情報を取得するパターン情報取得手段と前記パターン情報取得によって取得したパターン情報を認識するパターン情報認識手段と、前記パターン情報認識手段によって認識した情報に基づき前記部材の種類情報を検出する検出手段と、前記検出手段によって検出された種類情報に基づいて前記フラットパネルディスプレイ上にデバイスに関連付けられた情報を表示する情報表示手段と、を備えた前記第1構成から第4構成のいずれかに係るフラットパネルディスプレイ装置。
(Fifth configuration)
A member characterized by reflecting invisible light emitted from the invisible light transmitting part or the invisible light emitting part, and receiving the invisible light reflected by the member reflecting the invisible light. Pattern information acquisition means for receiving pattern information by receiving light by a unit, pattern information recognition means for recognizing pattern information acquired by the pattern information acquisition, and type information of the member based on information recognized by the pattern information recognition means Detection means for detecting, and information display means for displaying information associated with the device on the flat panel display based on the type information detected by the detection means. The flat panel display apparatus which concerns on either.

(第6構成)
前記不可視光透過部または前記不可視光発光部から発光された不可視光を反射することを特徴とする部材と、前記不可視光を反射することを特徴とする前記部材によって反射された不可視光を不可視光受光部によって受光してパターン情報を取得するパターン情報取得手段と、前記パターン情報取得によって取得したパターン情報を認識するパターン情報認識手段と、前記パターン情報認識手段によって認識した情報に基づき前記部材の種類情報と向き情報を検出する検出手段と、前記検出手段によって検出された種類情報に基づいて前記フラットパネルディスプレイ上にデバイスに関連付けられた情報を表示する情報表示手段と、前記情報表示手段によって表示された情報を前記向き情報に応じて変化させる情報表示状態変化手段と、を備えた前記第1構成から第4構成のいずれかに係るフラットパネルディスプレイ装置。
(Sixth configuration)
A member that reflects invisible light emitted from the invisible light transmitting portion or the invisible light emitting portion; and a member that reflects the invisible light, wherein the invisible light reflected by the member is invisible light. Pattern information acquisition means for receiving pattern information by receiving light by a light receiving unit, pattern information recognition means for recognizing pattern information acquired by the pattern information acquisition, and the type of member based on information recognized by the pattern information recognition means Displayed by the information display means, detection means for detecting information and orientation information, information display means for displaying information associated with the device on the flat panel display based on the type information detected by the detection means, and the information display means Information display state changing means for changing the received information according to the orientation information. Flat panel display apparatus according to any one of the fourth configuration from the first configuration with.

(第7構成)
前記不可視光透過部または前記不可視光発光部から発光された不可視光を反射することを特徴とする部材と、前記不可視光を反射することを特徴とする部材の形状を検出する形状検出手段と、前記形状検出手段によって検出した部材の形状に基づいて前記フラットパネルディスプレイ上に部材に関連付けられた情報を表示する情報表示手段と、を備えた前記第1構成から第4構成のいずれかに係るフラットパネルディスプレイ装置。
(Seventh configuration)
A member characterized by reflecting the invisible light emitted from the invisible light transmitting part or the invisible light emitting part; and a shape detecting means for detecting the shape of the member reflecting the invisible light; The information display means which displays the information linked | related with the member on the said flat panel display based on the shape of the member detected by the said shape detection means, The flat which concerns on either of the said 1st structure to 4th structure Panel display device.

(第8構成)
操作デバイスやRFIDタグなどの無線給電情報デバイスに給電し情報を取得するためのアンテナ部と、前記不可視光透過部または前記不可視光発光部から発光された不可視光を反射することを特徴とする部材と前記不可視光を反射することを特徴とする前記部材の反射光に基づいて部材の形状を検出する形状検出手段と、前記アンテナ部を用いて前記部材に組み込まれた情報送信部から部材に関連付けられた情報を取得する関連情報取得手段と、前記形状検出手段によって検出した部材の形状に基づいて前記関連情報取得手段によって取得された関連情報を表示する情報表示手段と、を備えた前記第1構成から第4構成のいずれかに係るフラットパネルディスプレイ装置。
(Eighth configuration)
An antenna unit for supplying power to a wireless power supply information device such as an operation device or an RFID tag to acquire information, and a member that reflects invisible light emitted from the invisible light transmitting unit or the invisible light emitting unit And a shape detecting means for detecting the shape of the member based on the reflected light of the member, and an information transmission unit incorporated in the member using the antenna unit, Related information acquisition means for acquiring the obtained information, and information display means for displaying the related information acquired by the related information acquisition means based on the shape of the member detected by the shape detection means. A flat panel display device according to any one of configuration to fourth configuration.

本発明は、画像検出機能を有する表示装置として、幅広く利用できる。   The present invention can be widely used as a display device having an image detection function.

本発明に係る表示装置に備えられた表示パネルの内部構成を示す図である。It is a figure which shows the internal structure of the display panel with which the display apparatus which concerns on this invention was equipped. 本発明に係る表示装置の要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the display apparatus which concerns on this invention. 表示装置においてタッチ位置の検出方法を決定する際の処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process at the time of determining the detection method of a touch position in a display apparatus. ダイヤル状の操作デバイス、およびカード状の操作デバイスが画面上に配置された状態の表示装置を示す図である。It is a figure which shows the display apparatus of the state by which the dial-shaped operation device and the card-shaped operation device are arrange | positioned on the screen. 操作デバイスによる操作の様子の一例を示す図である。It is a figure which shows an example of the mode of operation by an operating device. 操作デバイスの表面に形成されているパターンの一例を示す図である。It is a figure which shows an example of the pattern currently formed in the surface of the operation device. 表示パネル上に、操作デバイスやRFIDとの通信・給電を行うアンテナ部が備えられた構成の表示装置を示す図である。It is a figure which shows the display apparatus of the structure by which the antenna part which performs communication and electric power feeding with an operation device or RFID was provided on the display panel. 操作デバイスの操作結果に応じてメニューの表示状態を変化させる例を説明する図である。It is a figure explaining the example which changes the display state of a menu according to the operation result of an operation device. 操作デバイスを用いた操作時に応じて表示装置が実行する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which a display apparatus performs according to the time of operation using an operation device. 本発明の他の構成に係る表示パネルを示す図である。It is a figure which shows the display panel which concerns on the other structure of this invention. 本発明の他の構成に係る表示パネルを示す図である。It is a figure which shows the display panel which concerns on the other structure of this invention. 本発明の他の構成に係る表示パネルを示す図である。It is a figure which shows the display panel which concerns on the other structure of this invention. 本発明の他の構成に係る表示パネルを示す図である。It is a figure which shows the display panel which concerns on the other structure of this invention. バックライト部の構成を示す図である。It is a figure which shows the structure of a backlight part.

符号の説明Explanation of symbols

1 表示装置
2 表示パネル
4 検出処理部
6 表示処理部
8 検出設定部
10 画像解析部
12 処理実行部
14 入出力部
20 画素
26 R発光部(可視光照射手段、可視光発光手段)
28 G発光部(可視光照射手段、可視光発光手段)
30 B発光部(可視光照射手段、可視光発光手段)
32 R透過部(可視光照射手段、可視光透過手段)
34 G透過部(可視光照射手段、可視光透過手段)
36 B透過部(可視光照射手段、可視光透過手段)
22 不可視光発光部(不可視光照射手段、不可視光発光手段)
24 不可視光受光部(不可視光受光手段)
38 不可視光透過部(不可視光照射手段、不可視光透過手段)
42 バックライト部(不可視光照射手段、可視光照射手段)
44 R光源(可視光照射手段)
46 G光源(可視光照射手段)
48 B光源(可視光照射手段)
50 不可視光光源(不可視光照射手段)
DESCRIPTION OF SYMBOLS 1 Display apparatus 2 Display panel 4 Detection process part 6 Display process part 8 Detection setting part 10 Image analysis part 12 Process execution part 14 Input / output part 20 Pixel 26 R light emission part (visible light irradiation means, visible light light emission means)
28 G light emission part (visible light irradiation means, visible light emission means)
30 B light emission part (visible light irradiation means, visible light emission means)
32 R transmission part (visible light irradiation means, visible light transmission means)
34 G transmission part (visible light irradiation means, visible light transmission means)
36 B transmission part (visible light irradiation means, visible light transmission means)
22 Invisible light emitting part (invisible light emitting means, invisible light emitting means)
24 Invisible light receiving part (invisible light receiving means)
38 Invisible light transmission part (invisible light irradiation means, invisible light transmission means)
42 Backlight part (invisible light irradiation means, visible light irradiation means)
44 R light source (visible light irradiation means)
46 G light source (visible light irradiation means)
48 B light source (visible light irradiation means)
50 Invisible light source (invisible light irradiation means)

Claims (6)

表示パネルを備え、当該表示パネルの表示画面を通じて画像を検出する表示装置であって、
上記表示画面から可視光を外部に照射する可視光照射手段と、
上記表示画面から不可視光を外部に照射する不可視光照射手段と、
上記表示パネルを構成する複数の画素の画素ごとに形成された、上記不可視光の反射光を受光する不可視光受光手段とを備えていることを特徴とする表示装置。
A display device comprising a display panel and detecting an image through a display screen of the display panel,
Visible light irradiation means for irradiating visible light to the outside from the display screen;
Invisible light irradiation means for irradiating invisible light to the outside from the display screen;
A display device comprising: an invisible light receiving unit configured to receive the reflected light of the invisible light, which is formed for each of a plurality of pixels constituting the display panel.
上記不可視光照射手段は、上記画素ごとに設けられた、不可視光を照射する発光素子であることを特徴とする請求項1に記載の表示装置。   The display device according to claim 1, wherein the invisible light irradiation unit is a light emitting element that is provided for each of the pixels and emits invisible light. 上記不可視光照射手段は、不可視光を照射するバックライト部と、当該バックライト部から照射された不可視光を透過させる不可視光透過手段とによって構成されていることを特徴とする請求項1に記載の表示装置。   The said invisible light irradiation means is comprised by the backlight part which irradiates invisible light, and the invisible light transmission means which permeate | transmits the invisible light irradiated from the said backlight part, It is characterized by the above-mentioned. Display device. 上記可視光照射手段は、上記画素ごとに設けられた、可視光を照射する発光素子であることを特徴とする請求項1〜3のいずれか1項に記載の表示装置。   The display device according to claim 1, wherein the visible light irradiation unit is a light emitting element that is provided for each of the pixels and emits visible light. 上記可視光照射手段は、可視光を照射するバックライト部と、当該バックライト部から照射された可視光を透過させる可視光透過手段によって構成されていることを特徴とする請求項1〜3のいずれか1項に記載の表示装置。   The said visible light irradiation means is comprised by the backlight part which irradiates visible light, and the visible light transmission means which permeate | transmits the visible light irradiated from the said backlight part, The 1-3 of Claim 1-3 characterized by the above-mentioned. The display device according to any one of the above. 上記不可視光は赤外光または紫外光であることを特徴とする請求項1〜5のいずれか1項に記載の表示装置。   The display device according to claim 1, wherein the invisible light is infrared light or ultraviolet light.
JP2008280346A 2008-10-30 2008-10-30 Display device Expired - Fee Related JP4457163B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2008280346A JP4457163B1 (en) 2008-10-30 2008-10-30 Display device
PCT/JP2009/063518 WO2010050280A1 (en) 2008-10-30 2009-07-29 Display device
TW098128555A TW201017275A (en) 2008-10-30 2009-08-25 Display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008280346A JP4457163B1 (en) 2008-10-30 2008-10-30 Display device

Publications (2)

Publication Number Publication Date
JP4457163B1 JP4457163B1 (en) 2010-04-28
JP2010107776A true JP2010107776A (en) 2010-05-13

Family

ID=42128649

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008280346A Expired - Fee Related JP4457163B1 (en) 2008-10-30 2008-10-30 Display device

Country Status (3)

Country Link
JP (1) JP4457163B1 (en)
TW (1) TW201017275A (en)
WO (1) WO2010050280A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106019712A (en) * 2016-07-28 2016-10-12 京东方科技集团股份有限公司 Anti-peeping display device and display system
KR20170025728A (en) * 2015-08-31 2017-03-08 엘지디스플레이 주식회사 Liquid crystal display panel and liquid crystal display device having the same

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114460542A (en) * 2021-12-13 2022-05-10 无锡安邦电气股份有限公司 LED radar speed measurement screen and mounting structure thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004098175A1 (en) * 2003-04-30 2004-11-11 Toshiba Matsushita Display Technology Co. Ltd. Image magnification device
JP2005275644A (en) * 2004-03-24 2005-10-06 Sharp Corp Liquid crystal display
JP2006065305A (en) * 2004-07-16 2006-03-09 Semiconductor Energy Lab Co Ltd Display device mounted with read function and electronic equipment using the same
JP2009063803A (en) * 2007-09-06 2009-03-26 Sony Corp Display device
JP2009198703A (en) * 2008-02-20 2009-09-03 Sony Corp Liquid crystal display device and method of manufacturing the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004098175A1 (en) * 2003-04-30 2004-11-11 Toshiba Matsushita Display Technology Co. Ltd. Image magnification device
JP2005275644A (en) * 2004-03-24 2005-10-06 Sharp Corp Liquid crystal display
JP2006065305A (en) * 2004-07-16 2006-03-09 Semiconductor Energy Lab Co Ltd Display device mounted with read function and electronic equipment using the same
JP2009063803A (en) * 2007-09-06 2009-03-26 Sony Corp Display device
JP2009198703A (en) * 2008-02-20 2009-09-03 Sony Corp Liquid crystal display device and method of manufacturing the same

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170025728A (en) * 2015-08-31 2017-03-08 엘지디스플레이 주식회사 Liquid crystal display panel and liquid crystal display device having the same
KR102316562B1 (en) * 2015-08-31 2021-10-25 엘지디스플레이 주식회사 Liquid crystal display panel and liquid crystal display device having the same
CN106019712A (en) * 2016-07-28 2016-10-12 京东方科技集团股份有限公司 Anti-peeping display device and display system

Also Published As

Publication number Publication date
JP4457163B1 (en) 2010-04-28
TW201017275A (en) 2010-05-01
WO2010050280A1 (en) 2010-05-06

Similar Documents

Publication Publication Date Title
US10452937B2 (en) Electronic device supporting fingerprint verification function and method for operating the same
US9589170B2 (en) Information detection and display apparatus, and detecting method and displaying method thereof
KR20060134107A (en) Scanning display apparatus
CN104423771B (en) Drawing device
TWI475445B (en) Method and touch panel system for touch sensing using shadow and reflective modes
US8751962B2 (en) Remote control, display device, television receiver device, and program for remote control
US20090141001A1 (en) Display apparatus, liquid crystal display apparatus, position detection system and position detection method
EP1589408A2 (en) Display device having optical input function
US9213446B2 (en) Handwriting input device
US9035914B2 (en) Touch system including optical touch panel and touch pen, and method of controlling interference optical signal in touch system
JP2007164767A (en) Information display input device
US20150042625A1 (en) Display control system and display devices
US20140092068A1 (en) Optical touch panel and brightness control method thereof
JP4457163B1 (en) Display device
US20130113758A1 (en) Method and system for recognizing touch point, and display apparatus
JP2006216087A (en) Information display input device
KR20140079215A (en) Optical input apparatus
US20150035811A1 (en) Display control system, display device, and display panel
EP3149561B1 (en) Positional input on displays
JP6529827B2 (en) Display device
JP2006277492A (en) Display device
WO2016173176A1 (en) Display substrate, display apparatus and remote control system
WO2012140772A1 (en) Touch panel device, and information processing method using same
JP6161241B2 (en) Desk display device
JP2014063212A (en) Touch panel device

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100208

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees