JP7062341B2 - Display device and correction method - Google Patents

Display device and correction method Download PDF

Info

Publication number
JP7062341B2
JP7062341B2 JP2018172950A JP2018172950A JP7062341B2 JP 7062341 B2 JP7062341 B2 JP 7062341B2 JP 2018172950 A JP2018172950 A JP 2018172950A JP 2018172950 A JP2018172950 A JP 2018172950A JP 7062341 B2 JP7062341 B2 JP 7062341B2
Authority
JP
Japan
Prior art keywords
liquid crystal
led
light
infrared
amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018172950A
Other languages
Japanese (ja)
Other versions
JP2020046775A (en
Inventor
禎一 伊知川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2018172950A priority Critical patent/JP7062341B2/en
Publication of JP2020046775A publication Critical patent/JP2020046775A/en
Application granted granted Critical
Publication of JP7062341B2 publication Critical patent/JP7062341B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、表示装置及び補正方法に関する。 The present invention relates to a display device and a correction method.

従来より、車両に搭載される表示装置に赤外線LEDと赤外線検知デバイスとを内蔵させ、赤外線の投受光を行うことで、表示領域前方の空間(操作領域と称す)において行われる操作を検知する検知技術が知られている。当該表示装置によれば、操作領域に操作者の手指が移動することで赤外線が反射し、反射光の光量が増加することで、操作者による操作を検知することができる。 Conventionally, an infrared LED and an infrared detection device are built in a display device mounted on a vehicle, and infrared rays are emitted and received to detect an operation performed in a space (referred to as an operation area) in front of the display area. The technology is known. According to the display device, when the operator's finger moves to the operation area, infrared rays are reflected and the amount of reflected light increases, so that the operation by the operator can be detected.

特開2011-86220号公報Japanese Unexamined Patent Publication No. 2011-86220 特開2015-201067号公報JP-A-2015-201067

一方で、赤外線が操作者の手指に反射した際の反射光の光量は、常に一定であるとは限られず、例えば、表示領域に表示される画像データ(いわゆる絵柄)が変化した場合には、その影響を受ける。これは、画像データのRGB値の変化に伴い液晶装置の偏向度が変化し、赤外線の透過率が変化するからである。このため、表示領域に表示される画像データによっては、検知精度が低下することがある。 On the other hand, the amount of reflected light when infrared rays are reflected on the operator's fingers is not always constant. For example, when the image data (so-called pattern) displayed in the display area changes, the amount of reflected light is not always constant. Be affected by that. This is because the degree of deflection of the liquid crystal device changes as the RGB value of the image data changes, and the transmittance of infrared rays changes. Therefore, the detection accuracy may decrease depending on the image data displayed in the display area.

本発明は上記課題に鑑みてなされたものであり、表示領域前方の操作領域において行われる操作を検知する表示装置において、検知精度を向上させることを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to improve the detection accuracy in a display device that detects an operation performed in an operation area in front of the display area.

一態様によれば、表示装置は以下のような構成を備える。即ち、
液晶の表示領域のRフィルタを透過し、前方の操作領域に赤外線を投光する投光器と、
前記投光器が投光した際の反射光を受光する受光器と、
前記液晶の表示領域に表示される画像データの各画素のR値に基づいて算出した液晶偏向度から、赤外線の液晶透過率の積算値を算出し、前記投光器が投光する赤外線の光量、または、前記受光器が受光する反射光の光量を、前記赤外線の液晶透過率の積算値を用いて補正する補正部とを有することを特徴とする。
According to one aspect, the display device has the following configuration. That is,
A floodlight that transmits infrared rays to the operation area in front of the LCD through the R filter in the display area of the liquid crystal display.
A receiver that receives the reflected light when the floodlight is projected, and a receiver that receives the reflected light.
From the liquid crystal deflection degree calculated based on the R value of each pixel of the image data displayed in the liquid crystal display area, the integrated value of the infrared liquid crystal transmittance is calculated, and the amount of infrared light projected by the floodlight, or It is characterized by having a correction unit for correcting the amount of reflected light received by the light receiver by using the integrated value of the liquid crystal transmittance of the infrared rays .

表示領域前方の操作領域において行われる操作を検知する表示装置において、検知精度を向上させることができる。 The detection accuracy can be improved in the display device that detects the operation performed in the operation area in front of the display area.

表示装置の外観構成を示す図である。It is a figure which shows the appearance composition of the display device. 表示装置の各要素の配置例及び赤外線の投光範囲を示す断面図である。It is sectional drawing which shows the arrangement example of each element of a display device, and the light projection range of infrared rays. 表示装置のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware composition of a display device. 制御装置のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware composition of a control device. 第1の実施形態に係る表示装置において実現される表示制御部の機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the display control part realized in the display device which concerns on 1st Embodiment. 受光量補正部の機能構成の詳細を示す図である。It is a figure which shows the detail of the functional structure of the light receiving amount correction part. 第1LED~第4LEDの制御信号とPD信号の取得タイミングとの関係を示す図である。It is a figure which shows the relationship between the control signal of 1st LED to 4th LED, and the acquisition timing of a PD signal. 第1の実施形態に係る表示装置において実行される検知処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the detection process executed in the display device which concerns on 1st Embodiment. 第2の実施形態に係る表示装置において実現される表示制御部の機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the display control part realized in the display device which concerns on 2nd Embodiment. 投光量補正部の機能構成の詳細を示す図である。It is a figure which shows the detail of the functional structure of a light projection amount correction part. 第2の実施形態に係る表示装置において実行される検知処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the detection process executed in the display device which concerns on 2nd Embodiment.

以下、各実施形態について添付の図面を参照しながら説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複した説明を省く。 Hereinafter, each embodiment will be described with reference to the attached drawings. In the present specification and the drawings, components having substantially the same functional configuration are designated by the same reference numerals to omit duplicate explanations.

[第1の実施形態]
<表示装置の外観構成、各要素の配置例及び赤外線の投光範囲>
はじめに、第1の実施形態に係る表示装置の外観構成、表示装置の各要素の配置例、及び、赤外線の投光範囲について説明する。図1は、表示装置の外観構成を示す図であり、表示装置100を正面側から見た様子を示している。なお、以下では、表示装置100を正面側から見た場合の幅方向をx軸方向、高さ方向をy軸方向とする。
[First Embodiment]
<Appearance configuration of display device, arrangement example of each element and infrared projection range>
First, the appearance configuration of the display device according to the first embodiment, the arrangement example of each element of the display device, and the infrared projection range will be described. FIG. 1 is a diagram showing an external configuration of a display device, and shows a state in which the display device 100 is viewed from the front side. In the following, the width direction when the display device 100 is viewed from the front side is defined as the x-axis direction, and the height direction is defined as the y-axis direction.

図1に示すように、表示装置100は、画像を表示する表示領域を提供する液晶装置110と、表示領域の外周領域に位置する非表示領域120とを有する。また、表示装置100は、非表示領域120の内部に、投光器の一例である、第1の赤外線LED(Light Emitting Diode)131~第4の赤外線LED(Light Emitting Diode)134を有する。更に、表示装置100は、非表示領域120の内部に、受光器の一例である、PD(Photo Diode)140を有する。なお、以下では、第1の赤外線LED~第4の赤外線LEDを、第1LED~第4LEDと略して記載する。 As shown in FIG. 1, the display device 100 has a liquid crystal display device 110 that provides a display area for displaying an image, and a non-display area 120 that is located in an outer peripheral region of the display area. Further, the display device 100 has a first infrared LED (Light Emitting Diode) 131 to a fourth infrared LED (Light Emitting Diode) 134, which is an example of a floodlight, inside the non-display area 120. Further, the display device 100 has a PD (Photo Diode) 140, which is an example of a light receiver, inside the non-display area 120. In the following, the first infrared LED to the fourth infrared LED will be abbreviated as the first LED to the fourth LED.

図1の例では、第1LED131が表示装置100に向かって最も左側に配置されており、第4LED134が表示装置100に向かって最も右側に配置されている。第1LED131~第4LED134は、それぞれ、表示領域前方の操作領域に対する操作を検知するための赤外線を投光する。 In the example of FIG. 1, the first LED 131 is arranged on the leftmost side toward the display device 100, and the fourth LED 134 is arranged on the rightmost side toward the display device 100. Each of the first LED 131 to the fourth LED 134 emits infrared rays for detecting an operation on the operation area in front of the display area.

また、図1に示すように、PD140は、表示領域の中央下部に配置され、表示領域前方の操作領域を受光範囲としている。これにより、PD140は、表示領域前方に投光された赤外線に対する反射物からの反射光を、受光することができる。 Further, as shown in FIG. 1, the PD 140 is arranged in the lower center of the display area, and the operation area in front of the display area is the light receiving range. As a result, the PD 140 can receive the reflected light from the reflector with respect to the infrared rays projected in front of the display area.

図2は、表示装置の各要素の配置例及び赤外線の投光範囲を示す断面図である。このうち、図2(a)は、表示装置100を左側面から見た場合の断面図である。なお、以下では、表示領域に略直交する方向をz軸方向とする。 FIG. 2 is a cross-sectional view showing an arrangement example of each element of the display device and an infrared projection range. Of these, FIG. 2A is a cross-sectional view of the display device 100 when viewed from the left side. In the following, the direction substantially orthogonal to the display area is referred to as the z-axis direction.

図2(a)に示すように、非表示領域120の内部に配置された第1LED131~第4LED134より投光された赤外線は、導光板200に導かれ、液晶装置110により提供される表示領域の前方に投光される(投光範囲201~204参照)。 As shown in FIG. 2A, the infrared rays emitted from the first LED 131 to the fourth LED 134 arranged inside the non-display area 120 are guided to the light guide plate 200 and are provided by the liquid crystal device 110 in the display area. The light is projected forward (see the projection range 201 to 204).

図2(b)は、表示装置100を上から見た場合の断面図である。図2(b)に示すように、液晶装置110により提供される表示領域の前方に位置する操作領域であって、例えば、第4LED134の投光範囲204に操作者の手指210が移動したとする。この場合、第4LED134より赤外線が投光されると、投光された赤外線が、操作者の手指210で反射し、反射光がPD140において受光されることになる。この結果、PD140における受光量が増加し、表示装置100では、投光範囲204において操作が行われたことを検知する。 FIG. 2B is a cross-sectional view of the display device 100 when viewed from above. As shown in FIG. 2B, it is an operation area located in front of the display area provided by the liquid crystal device 110, and it is assumed that the operator's finger 210 moves to the light projection range 204 of the fourth LED 134, for example. .. In this case, when infrared rays are projected from the fourth LED 134, the projected infrared rays are reflected by the operator's finger 210, and the reflected light is received by the PD 140. As a result, the amount of light received by the PD 140 increases, and the display device 100 detects that the operation has been performed in the light projection range 204.

<表示装置のハードウェア構成>
次に、表示装置のハードウェア構成について説明する。図3は、表示装置のハードウェア構成の一例を示す図である。図3に示すように、表示装置100は、液晶装置110と、第1LED131~第4LED134と、PD140と、制御装置300とを有する。
<Hardware configuration of display device>
Next, the hardware configuration of the display device will be described. FIG. 3 is a diagram showing an example of the hardware configuration of the display device. As shown in FIG. 3, the display device 100 includes a liquid crystal display device 110, first LED 131 to fourth LED 134, PD 140, and a control device 300.

制御装置300には、表示制御プログラムがインストールされており、当該プログラムが実行されることで、制御装置300は、表示制御部310として機能する。表示制御部310は、液晶装置110に画像データを出力することで、表示領域に画像を表示する。 A display control program is installed in the control device 300, and when the program is executed, the control device 300 functions as the display control unit 310. The display control unit 310 displays the image in the display area by outputting the image data to the liquid crystal device 110.

また、表示制御部310は、第1LED131~第4LED134による赤外線の投光を制御する制御信号を出力する。また、表示制御部310は、第1LED131~第4LED134それぞれの投光タイミングに応じてPD140の受光を制御し、PD140が受光したPD信号を取得する。また、表示制御部310は、取得したPD信号に基づき、各投光タイミングにおける赤外線の受光量を算出する。更に、表示制御部310は、算出した受光量に基づいて、表示領域前方の操作領域において操作者による操作が行われたか否かを判定する。 Further, the display control unit 310 outputs a control signal for controlling the projection of infrared rays by the first LED 131 to the fourth LED 134. Further, the display control unit 310 controls the light reception of the PD 140 according to the light projection timing of each of the first LED 131 to the fourth LED 134, and acquires the PD signal received by the PD 140. Further, the display control unit 310 calculates the amount of infrared light received at each projection timing based on the acquired PD signal. Further, the display control unit 310 determines whether or not an operation by the operator has been performed in the operation area in front of the display area based on the calculated light receiving amount.

<制御装置のハードウェア構成>
次に、制御装置300のハードウェア構成について説明する。図4は、制御装置のハードウェア構成の一例を示す図である。図4に示すように、制御装置300は、演算装置401、記憶装置402、信号出力装置403、画像データ出力装置404、信号入力装置405を有する。なお、制御装置300を構成する各ハードウェアは、バス406を介して相互に接続されている。
<Hardware configuration of control device>
Next, the hardware configuration of the control device 300 will be described. FIG. 4 is a diagram showing an example of the hardware configuration of the control device. As shown in FIG. 4, the control device 300 includes an arithmetic unit 401, a storage device 402, a signal output device 403, an image data output device 404, and a signal input device 405. The hardware constituting the control device 300 is connected to each other via the bus 406.

演算装置401は、表示制御部310として機能する集積回路である。記憶装置402は、演算装置401が表示制御部310として機能する際に用いられる情報等を格納するメモリである。信号出力装置403は、演算装置401からの指令に基づき第1LED131~第4LED134を制御する制御信号を出力する出力デバイスである。画像データ出力装置404は、演算装置401の指令に基づき生成された画像データを、液晶装置110に出力する画像出力デバイスである。信号入力装置405は、PD140よりPD信号を受信し、演算装置401に入力する入力デバイスである。 The arithmetic unit 401 is an integrated circuit that functions as a display control unit 310. The storage device 402 is a memory for storing information and the like used when the arithmetic unit 401 functions as the display control unit 310. The signal output device 403 is an output device that outputs a control signal for controlling the first LED 131 to the fourth LED 134 based on a command from the arithmetic unit 401. The image data output device 404 is an image output device that outputs image data generated based on a command of the arithmetic unit 401 to the liquid crystal display device 110. The signal input device 405 is an input device that receives a PD signal from the PD 140 and inputs it to the arithmetic unit 401.

<表示制御部の機能構成>
次に、表示制御部310の機能構成について説明する。図5は、第1の実施形態に係る表示装置において実現される表示制御部の機能構成の一例を示す図である。図5に示すように、表示制御部310は、全体制御部510、Ir-LED制御部520、表示部530、検知部540、受光量補正部550を有する。
<Functional configuration of display control unit>
Next, the functional configuration of the display control unit 310 will be described. FIG. 5 is a diagram showing an example of a functional configuration of a display control unit realized in the display device according to the first embodiment. As shown in FIG. 5, the display control unit 310 includes an overall control unit 510, an Ir-LED control unit 520, a display unit 530, a detection unit 540, and a light receiving amount correction unit 550.

全体制御部510は、表示装置100全体を制御し、Ir-LED制御部520に制御信号を出力したり、表示部530に画像データを出力したりする。また、全体制御部510は、検知部540より検知結果を取得する。 The overall control unit 510 controls the entire display device 100, outputs a control signal to the Ir-LED control unit 520, and outputs image data to the display unit 530. Further, the overall control unit 510 acquires the detection result from the detection unit 540.

Ir-LED制御部520は、全体制御部510より出力された制御信号に基づいて、第1LED131~第4LED134の投光を制御する。また、Ir-LED制御部520は、全体制御部510より出力された制御信号を、受光量補正部550に通知する。 The Ir-LED control unit 520 controls the projection of the first LED 131 to the fourth LED 134 based on the control signal output from the overall control unit 510. Further, the Ir-LED control unit 520 notifies the light receiving amount correction unit 550 of the control signal output from the overall control unit 510.

表示部530は、全体制御部510より出力された画像データに基づいて、液晶装置110を制御する。また、表示部530は、全体制御部510より出力された画像データに含まれる各画素値(R値、G値、B値)のうち、R値を受光量補正部550に通知する。ここで、R値のみを通知するのは、液晶装置110が備えるR、G、Bの各カラーフィルタのうち、Rフィルタは検知に用いる赤外線をほぼ透過し、G、Bフィルタは赤外線をほぼ遮断するという特性を有するからである。 The display unit 530 controls the liquid crystal device 110 based on the image data output from the overall control unit 510. Further, the display unit 530 notifies the light receiving amount correction unit 550 of the R value among the pixel values (R value, G value, B value) included in the image data output from the overall control unit 510. Here, among the R, G, and B color filters included in the liquid crystal device 110, only the R value is notified. Of the R, G, and B color filters, the R filter substantially transmits infrared rays used for detection, and the G and B filters substantially block infrared rays. This is because it has the characteristic of

受光量補正部550は、Ir-LED制御部520より通知された制御信号に基づいて、PD140が受光したPD信号を、信号入力装置405を介して取得する。また、受光量補正部550は、取得したPD信号が示す受光量を、表示部530より通知されたR値に基づいて補正し、補正後受光量を検知部540に通知する。 The light receiving amount correction unit 550 acquires the PD signal received by the PD 140 via the signal input device 405 based on the control signal notified from the Ir-LED control unit 520. Further, the light receiving amount correction unit 550 corrects the light receiving amount indicated by the acquired PD signal based on the R value notified from the display unit 530, and notifies the detection unit 540 of the corrected light receiving amount.

検知部540は、受光量補正部550より通知された補正後受光量に基づいて、操作領域において操作者により操作が行われたか否かを判定する。また、検知部540は、操作領域において操作者により操作が行われたと判定した場合に、検知結果(操作が行われたこと、操作された位置等の情報)を全体制御部510に通知する。 The detection unit 540 determines whether or not an operation has been performed by the operator in the operation area based on the corrected light reception amount notified by the light reception amount correction unit 550. Further, when the detection unit 540 determines that the operation has been performed by the operator in the operation area, the detection unit 540 notifies the overall control unit 510 of the detection result (information such as that the operation has been performed and the operated position).

<受光量補正部の機能構成の詳細>
次に、受光量補正部550の機能構成の詳細について説明する。図6は、受光量補正部の機能構成の詳細を示す図である。図6に示すように、受光量補正部550は、選択部610、透過率積算部620、補正部630、受光量取得部640を有する。
<Details of the functional configuration of the light receiving amount correction unit>
Next, the details of the functional configuration of the light receiving amount correction unit 550 will be described. FIG. 6 is a diagram showing details of the functional configuration of the light receiving amount correction unit. As shown in FIG. 6, the light receiving amount correction unit 550 includes a selection unit 610, a transmittance integrating unit 620, a correction unit 630, and a light receiving amount acquisition unit 640.

選択部610は、表示部530より通知されたR値を、第1領域から第4領域に分けて、順次、取得する。図6に示すように、液晶装置110により提供される表示領域は、第1LED131~第4LED134の位置に応じて、4つの領域(第1領域から第4領域)に分けられる。そこで、選択部610は、表示領域に表示される画像データのうち、はじめに、第1領域に表示される画像データの画素値(R値)を、第1領域画素値(R)として取得し、透過率積算部620に通知する。 The selection unit 610 divides the R value notified from the display unit 530 into the first region to the fourth region, and sequentially acquires the R value. As shown in FIG. 6, the display area provided by the liquid crystal device 110 is divided into four areas (first area to fourth area) according to the positions of the first LED 131 to the fourth LED 134. Therefore, the selection unit 610 first acquires the pixel value (R value) of the image data displayed in the first area among the image data displayed in the display area as the first area pixel value (R). Notify the transmittance integrating unit 620.

続いて、選択部610は、表示領域に表示される画像データのうち、第2領域に表示される画像データの画素値(R値)を、第2領域画素値(R)として取得し、透過率積算部620に通知する。 Subsequently, the selection unit 610 acquires the pixel value (R value) of the image data displayed in the second area among the image data displayed in the display area as the second area pixel value (R), and transmits the image data. Notify the rate integration unit 620.

続いて、選択部610は、表示領域に表示される画像データのうち、第3領域に表示される画像データの画素値(R値)を、第3領域画素値(R)として取得し、透過率積算部620に通知する。 Subsequently, the selection unit 610 acquires the pixel value (R value) of the image data displayed in the third area among the image data displayed in the display area as the third area pixel value (R), and transmits the image data. Notify the rate integration unit 620.

続いて、選択部610は、表示領域に表示される画像データのうち、第4領域に表示される画像データの画素値(R値)を、第4領域画素値(R)として取得し、透過率積算部620に通知する。 Subsequently, the selection unit 610 acquires the pixel value (R value) of the image data displayed in the fourth area among the image data displayed in the display area as the fourth area pixel value (R), and transmits the image data. Notify the rate integration unit 620.

透過率積算部620は、選択部610より通知された第1領域画素値(R)に基づいて、第1領域の液晶偏向度を算出する。これにより、第1領域における赤外線の液晶透過率の積算値を算出することができる。同様に、透過率積算部620は、選択部610より通知された第2領域画素値(R)に基づいて、第2領域の液晶偏向度を算出する。これにより、第2領域における赤外線の液晶透過率の積算値を算出することができる。 The transmittance integration unit 620 calculates the liquid crystal deflection degree of the first region based on the first region pixel value (R) notified by the selection unit 610. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the first region. Similarly, the transmittance integrating unit 620 calculates the liquid crystal deflection degree in the second region based on the second region pixel value (R) notified by the selection unit 610. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the second region.

同様に、透過率積算部620は、選択部610より通知された第3領域画素値(R)に基づいて、第3領域の液晶偏向度を算出する。これにより、第3領域における赤外線の液晶透過率の積算値を算出することができる。同様に、透過率積算部620は、選択部610より通知された第4領域画素値(R)に基づいて、第4領域の液晶偏向度を算出する。これにより、第4領域における赤外線の液晶透過率の積算値を算出することができる。 Similarly, the transmittance integrating unit 620 calculates the liquid crystal deflection degree in the third region based on the third region pixel value (R) notified by the selection unit 610. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the third region. Similarly, the transmittance integrating unit 620 calculates the liquid crystal deflection degree in the fourth region based on the fourth region pixel value (R) notified by the selection unit 610. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the fourth region.

受光量取得部640は、Ir-LED制御部520より通知される制御信号に基づいて、PD信号を取得する。ここで、第1LED131~第4LED134の制御信号と、受光量取得部640におけるPD信号の取得タイミングとの関係を図7に示す。 The light receiving amount acquisition unit 640 acquires a PD signal based on the control signal notified from the Ir-LED control unit 520. Here, FIG. 7 shows the relationship between the control signals of the first LED 131 to the fourth LED 134 and the acquisition timing of the PD signal in the light receiving amount acquisition unit 640.

図7は、第1LED~第4LEDの制御信号とPD信号の取得タイミングとの関係を示す図であり、横軸は時間を表し、縦軸は投光または受光のON及びOFFのタイミングを示している。図6に示すように、Ir-LED制御部520は、第1LED131~第4LED134それぞれによる投光のON及びOFFが、順次、実行されるように制御する。 FIG. 7 is a diagram showing the relationship between the control signals of the first LED to the fourth LED and the acquisition timing of the PD signal, the horizontal axis represents time, and the vertical axis represents the ON / OFF timing of light projection or light reception. There is. As shown in FIG. 6, the Ir-LED control unit 520 controls so that ON and OFF of the light projection by each of the first LED 131 to the fourth LED 134 are sequentially executed.

図7の場合、Ir-LED制御部520は、はじめに第1LED131が赤外線を投光するように制御する。続いて、Ir-LED制御部520は、第2LED132が赤外線を投光するように制御する。このとき、Ir-LED制御部520は、第1LED131の投光時間帯と、第2LED132の投光時間帯とが重なることがないように、第1LED131及び第2LED132の投光のON及びOFFを制御する。 In the case of FIG. 7, the Ir-LED control unit 520 first controls the first LED 131 to emit infrared light. Subsequently, the Ir-LED control unit 520 controls the second LED 132 to emit infrared light. At this time, the Ir-LED control unit 520 controls ON and OFF of the light projection of the first LED 131 and the second LED 132 so that the light projection time zone of the first LED 131 and the light projection time zone of the second LED 132 do not overlap. do.

続いて、Ir-LED制御部520は、第3LED133が赤外線を投光するように制御する。このとき、Ir-LED制御部520は、第2LED132の投光時間帯と、第3LED133の投光時間帯とが重なることがないように、第2LED132及び第3LED133の投光のON及びOFFを制御する。 Subsequently, the Ir-LED control unit 520 controls the third LED 133 so as to emit infrared light. At this time, the Ir-LED control unit 520 controls ON and OFF of the light projection of the second LED 132 and the third LED 133 so that the light projection time zone of the second LED 132 and the light projection time zone of the third LED 133 do not overlap. do.

以下、第4LED134の投光のON及びOFFまで同様の制御を繰り返し、第4LED134の投光のON及びOFFの制御が完了すると、Ir-LED制御部520では、再び、第1LED131が赤外線を投光するように制御する。 Hereinafter, the same control is repeated until the light emission of the 4th LED 134 is turned on and off, and when the control of the light projection of the 4th LED 134 is completed, the Ir-LED control unit 520 again emits infrared rays to the 1st LED 131. Control to do.

一方、受光量取得部640は、第1LED131~第4LED134それぞれの投光タイミングに同期して受光するよう、PD140を制御する。これにより、受光量取得部640では、第1LED131~第4LED134それぞれの投光タイミングにおいて、PD140が受光した赤外線の受光量を取得することができる。 On the other hand, the light receiving amount acquisition unit 640 controls the PD 140 so as to receive light in synchronization with the light projection timing of each of the first LED 131 to the fourth LED 134. As a result, the light receiving amount acquisition unit 640 can acquire the light receiving amount of the infrared rays received by the PD 140 at the light projection timing of each of the first LED 131 to the fourth LED 134.

Ir-LED制御部520及び受光量取得部640では、これらの処理を一周期として繰り返し実行する。これにより、表示制御部310では、表示装置100の起動中、操作領域において操作が行われたか否かを、常時監視することができる。なお、Ir-LED制御部520及び受光量取得部640では、例えば、10[msec]の繰り返し周期により、これらの処理を繰り返すものとする。 The Ir-LED control unit 520 and the light receiving amount acquisition unit 640 repeatedly execute these processes as one cycle. As a result, the display control unit 310 can constantly monitor whether or not an operation has been performed in the operation area while the display device 100 is being activated. The Ir-LED control unit 520 and the light receiving amount acquisition unit 640 repeat these processes, for example, with a repetition cycle of 10 [msec].

図6の説明に戻る。受光量取得部640において取得した受光量は、補正部630に通知される。補正部630は、第1LED131投光時の受光量を、第1領域における赤外線の液晶透過率の積算値を用いて補正する。第1領域を透過した赤外線の光量は、第1領域における赤外線の液晶透過率の積算値によって決まるからである。 Returning to the description of FIG. The light receiving amount acquired by the light receiving amount acquisition unit 640 is notified to the correction unit 630. The correction unit 630 corrects the amount of light received when the first LED 131 is projected using the integrated value of the infrared liquid crystal transmittance in the first region. This is because the amount of infrared light transmitted through the first region is determined by the integrated value of the infrared liquid crystal transmittance in the first region.

同様に、補正部630は、第2LED132投光時の受光量を、第2領域における赤外線の液晶透過率の積算値を用いて補正する。第2領域を透過した赤外線の光量は、第2領域における赤外線の液晶透過率の積算値によって決まるからである。同様に、補正部630は、第3LED133投光時の受光量を、第3領域における赤外線の液晶透過率の積算値を用いて補正する。第3領域を透過した赤外線の光量は、第3領域における赤外線の液晶透過率の積算値によって決まるからである。同様に、補正部630は、第4LED134投光時の受光量を、第4領域における赤外線の液晶透過率の積算値を用いて補正する。第4領域を透過した赤外線の光量は、第4領域における赤外線の液晶透過率の積算値によって決まるからである。 Similarly, the correction unit 630 corrects the light receiving amount at the time of projecting the second LED 132 by using the integrated value of the liquid crystal transmittance of infrared rays in the second region. This is because the amount of infrared light transmitted through the second region is determined by the integrated value of the infrared liquid crystal transmittance in the second region. Similarly, the correction unit 630 corrects the light receiving amount at the time of projecting the third LED 133 by using the integrated value of the liquid crystal transmittance of infrared rays in the third region. This is because the amount of infrared light transmitted through the third region is determined by the integrated value of the infrared liquid crystal transmittance in the third region. Similarly, the correction unit 630 corrects the light receiving amount at the time of projecting the fourth LED 134 by using the integrated value of the liquid crystal transmittance of infrared rays in the fourth region. This is because the amount of infrared light transmitted through the fourth region is determined by the integrated value of the infrared liquid crystal transmittance in the fourth region.

このように、赤外線LEDの位置に応じた領域ごとに、画像データのR値に応じた液晶透過率の積算値を算出し、各領域の受光量を補正する。これにより、投光量補正部910では、画像データのR値の変化に伴う赤外線の透過率の変化(つまり、赤外線照射量の変化)の影響を排除した、補正後の受光量を出力することができる。 In this way, the integrated value of the liquid crystal transmittance corresponding to the R value of the image data is calculated for each region corresponding to the position of the infrared LED, and the light receiving amount in each region is corrected. As a result, the light projection amount correction unit 910 can output the corrected light receiving amount excluding the influence of the change in the infrared transmittance (that is, the change in the infrared irradiation amount) due to the change in the R value of the image data. can.

<検知処理の流れ>
次に、表示装置100において実行される検知処理の流れについて説明する。図8は、第1の実施形態に係る表示装置において実行される検知処理の流れを示すフローチャートである。表示装置100が起動することで、図8に示すフローチャートが実行される。
<Flow of detection process>
Next, the flow of the detection process executed by the display device 100 will be described. FIG. 8 is a flowchart showing the flow of the detection process executed in the display device according to the first embodiment. When the display device 100 is activated, the flowchart shown in FIG. 8 is executed.

ステップS801において、全体制御部510は、LEDカウンタnに"1"を代入する。ステップS802において、Ir-LED制御部520は、第nLEDを制御することで投光を行い、受光量補正部550は、PD140が受光したPD信号に基づいて、受光量を取得する。 In step S801, the overall control unit 510 substitutes "1" for the LED counter n. In step S802, the Ir-LED control unit 520 projects light by controlling the nth LED, and the light receiving amount correction unit 550 acquires the light receiving amount based on the PD signal received by the PD 140.

ステップS803において、受光量補正部550は、第n領域の画像データの画素値(R)を表示部530から取得し、液晶透過率の積算値を算出する。ステップS804において、受光量補正部550は、取得した受光量を、液晶透過率の積算値を用いて補正し、補正後の受光量を出力する。 In step S803, the light receiving amount correction unit 550 acquires the pixel value (R) of the image data in the nth region from the display unit 530, and calculates the integrated value of the liquid crystal transmittance. In step S804, the light receiving amount correction unit 550 corrects the acquired light receiving amount using the integrated value of the liquid crystal transmittance, and outputs the corrected light receiving amount.

ステップS805において、検知部540は、補正後の受光量に基づいて、操作領域において操作が行われたか否かを判定し、操作が行われたと判定した場合には、検知結果を全体制御部510に出力する。 In step S805, the detection unit 540 determines whether or not an operation has been performed in the operation area based on the corrected light receiving amount, and if it is determined that the operation has been performed, the detection result is determined by the overall control unit 510. Output to.

ステップS806において、全体制御部510は、検知処理を終了するか否かを判定し、終了しないと判定した場合には(ステップS806においてNoの場合には)、ステップS807に進む。 In step S806, the overall control unit 510 determines whether or not to end the detection process, and if it is determined not to end (if No in step S806), the process proceeds to step S807.

ステップS807において、全体制御部510は、LEDカウンタnが"4"であるか否かを判定する。ステップS807において、LEDカウンタnが"4"であると判定した場合には(ステップS807においてYesの場合には)、ステップS809に進み、LEDカウンタnに"1"を代入した後、ステップS802に戻る。 In step S807, the overall control unit 510 determines whether or not the LED counter n is "4". If it is determined in step S807 that the LED counter n is "4" (yes in step S807), the process proceeds to step S809, "1" is assigned to the LED counter n, and then step S802 is performed. return.

一方、ステップS807において、LEDカウンタnが"4"でないと判定した場合には(ステップS807においてNoの場合には)、ステップS808に進み、LEDカウンタnをインクリメントした後、ステップS802に戻る。 On the other hand, if it is determined in step S807 that the LED counter n is not "4" (No in step S807), the process proceeds to step S808, the LED counter n is incremented, and then the process returns to step S802.

一方、ステップS806において、終了すると判定した場合には(ステップS806においてYesの場合には)、検知処理を終了する。 On the other hand, if it is determined in step S806 to end (in the case of Yes in step S806), the detection process ends.

<まとめ>
以上の説明から明らかなように、第1の実施形態に係る表示装置100は、
・表示領域前方の操作領域に赤外線を投光する第1LED~第4LEDを有する。
・第1LED~第4LEDが順次投光し、それぞれの投光タイミングにおいてPDが受光した赤外線の受光量を取得する。
・第1LED~第4LEDが順次投光する際に、表示領域に表示される画像データの各画素値(R値)を、第1LED~第4LEDの位置に応じた領域ごとに取得する。
・取得した各領域の画素値(R値)に基づいて、領域ごとに、液晶透過率の積算値を算出し、算出した液晶透過率の積算値に基づいて、取得した赤外線の受光量を、領域ごとに補正する。
<Summary>
As is clear from the above description, the display device 100 according to the first embodiment is
-The operation area in front of the display area has the first LED to the fourth LED that emit infrared rays.
-The first LED to the fourth LED emit light in sequence, and the amount of infrared rays received by the PD at each light projection timing is acquired.
-When the first LED to the fourth LED sequentially project light, each pixel value (R value) of the image data displayed in the display area is acquired for each area corresponding to the position of the first LED to the fourth LED.
-Based on the acquired pixel value (R value) of each region, the integrated value of the liquid crystal transmittance is calculated for each region, and based on the calculated integrated value of the liquid crystal transmittance, the acquired infrared light receiving amount is calculated. Correct for each area.

これにより、第1の実施形態によれば、表示領域に表示される画像データのR値の変化に応じて、赤外線の受光量を補正することが可能となり、表示領域に表示される画像データのR値の変化に伴う赤外線照射量の変化の影響を除外することができる。 As a result, according to the first embodiment, it is possible to correct the amount of infrared light received according to the change in the R value of the image data displayed in the display area, and the image data displayed in the display area can be corrected. It is possible to exclude the influence of the change in the infrared irradiation amount due to the change in the R value.

この結果、第1の実施形態によれば、表示領域前方の操作領域において行われる操作を検知する表示装置において、検知精度を向上させることができる。 As a result, according to the first embodiment, the detection accuracy can be improved in the display device that detects the operation performed in the operation area in front of the display area.

[第2の実施形態]
上記第1の実施形態では、表示領域に表示される画像データのR値の変化に伴う赤外線照射量の変化の影響を除外するために、赤外線の受光量を補正する場合について説明した。しかしながら、表示領域に表示される画像データのR値の変化に伴う赤外線照射量の変化の影響を除外するための方法はこれに限定されず、例えば、赤外線の投光量を補正するように構成してもよい。以下、第2の実施形態について、上記第1の実施形態との相違点を中心に説明する。
[Second Embodiment]
In the first embodiment, a case where the amount of infrared rays received is corrected in order to exclude the influence of the change in the infrared irradiation amount due to the change in the R value of the image data displayed in the display area has been described. However, the method for excluding the influence of the change in the infrared irradiation amount due to the change in the R value of the image data displayed in the display area is not limited to this, and for example, it is configured to correct the infrared light projection amount. You may. Hereinafter, the second embodiment will be described focusing on the differences from the first embodiment.

<表示制御部の機能構成>
はじめに、第2の実施形態に係る表示装置における表示制御部の機能構成について説明する。図9は、第2の実施形態に係る表示装置における表示制御部の機能構成の一例を示す図である。図5との相違点は、表示制御部900の場合、投光量補正部910、Ir-LED制御部920、受光量取得部930を有する。
<Functional configuration of display control unit>
First, the functional configuration of the display control unit in the display device according to the second embodiment will be described. FIG. 9 is a diagram showing an example of the functional configuration of the display control unit in the display device according to the second embodiment. The difference from FIG. 5 is that in the case of the display control unit 900, the display control unit 900 has a light projection amount correction unit 910, an Ir-LED control unit 920, and a light receiving amount acquisition unit 930.

投光量補正部910は、全体制御部510より出力された制御信号を、Ir-LED制御部920に通知する。また、投光量補正部910は、表示部530より通知された画素値に基づいて、第1LED131~第4LED134の投光量を算出し、Ir-LED制御部920に通知する。 The floodlight correction unit 910 notifies the Ir-LED control unit 920 of the control signal output from the overall control unit 510. Further, the light projection amount correction unit 910 calculates the light projection amount of the first LED 131 to the fourth LED 134 based on the pixel value notified from the display unit 530, and notifies the Ir-LED control unit 920.

Ir-LED制御部920は、投光量補正部910より通知された制御信号と、投光量補正部910より通知された投光量とに基づいて、第1LED131~第4LED134の投光タイミング、投光量を制御する。また、Ir-LED制御部920は、投光量補正部910より通知された制御信号を、受光量取得部930に通知する。 The Ir-LED control unit 920 determines the light projection timing and the light projection amount of the first LED 131 to the fourth LED 134 based on the control signal notified by the light projection amount correction unit 910 and the light projection amount notified by the light projection amount correction unit 910. Control. Further, the Ir-LED control unit 920 notifies the light receiving amount acquisition unit 930 of the control signal notified by the light projection amount correction unit 910.

受光量取得部930は、Ir-LED制御部920より通知された制御信号に基づいて、PD140が受光したPD信号を、信号入力装置405を介して取得する。また、受光量取得部930は、取得したPD信号が示す受光量を、検知部540に通知する。 The light receiving amount acquisition unit 930 acquires the PD signal received by the PD 140 via the signal input device 405 based on the control signal notified from the Ir-LED control unit 920. Further, the light receiving amount acquisition unit 930 notifies the detection unit 540 of the light receiving amount indicated by the acquired PD signal.

<投光量補正部の機能構成の詳細>
次に、投光量補正部910の機能構成の詳細について説明する。図10は、投光量補正部の機能構成の詳細を示す図である。図10に示すように、投光量補正部910は、選択部1010、透過率積算部1020、補正部1030を有する。
<Details of the functional configuration of the light projection correction unit>
Next, the details of the functional configuration of the light projection amount correction unit 910 will be described. FIG. 10 is a diagram showing details of the functional configuration of the light projection amount correction unit. As shown in FIG. 10, the projection amount correction unit 910 includes a selection unit 1010, a transmittance integration unit 1020, and a correction unit 1030.

選択部1010は、表示部530より通知されたR値を、第1領域から第4領域に分けて、順次、取得する。図10に示すように、液晶装置110により提供される表示領域は、第1LED131~第4LED134の位置に応じて、4つの領域(第1領域から第4領域)に分けられる。そこで、選択部1010は、表示領域に表示される画像データのうち、はじめに、第1領域に表示される画像データの画素値(R値)を、第1領域画素値(R)として取得し、透過率積算部1020に通知する。 The selection unit 1010 divides the R value notified from the display unit 530 into the first region to the fourth region, and sequentially acquires the R value. As shown in FIG. 10, the display area provided by the liquid crystal device 110 is divided into four areas (first area to fourth area) according to the positions of the first LED 131 to the fourth LED 134. Therefore, the selection unit 1010 first acquires the pixel value (R value) of the image data displayed in the first area among the image data displayed in the display area as the first area pixel value (R). Notify the transmittance integrating unit 1020.

続いて、選択部1010は、表示領域に表示される画像データのうち、第2領域に表示される画像データの画素値(R値)を、第2領域画素値(R)として取得し、透過率積算部1020に通知する。 Subsequently, the selection unit 1010 acquires the pixel value (R value) of the image data displayed in the second area among the image data displayed in the display area as the second area pixel value (R), and transmits the image data. Notify the rate integration unit 1020.

続いて、選択部1010は、表示領域に表示される画像データのうち、第3領域に表示される画像データの画素値(R値)を、第3領域画素値(R)として取得し、透過率積算部1020に通知する。 Subsequently, the selection unit 1010 acquires the pixel value (R value) of the image data displayed in the third area among the image data displayed in the display area as the third area pixel value (R), and transmits the image data. Notify the rate integration unit 1020.

続いて、選択部1010は、表示領域に表示される画像データのうち、第4領域に表示される画像データの画素値(R値)を、第4領域画素値(R)として取得し、透過率積算部1020に通知する。 Subsequently, the selection unit 1010 acquires the pixel value (R value) of the image data displayed in the fourth area among the image data displayed in the display area as the fourth area pixel value (R), and transmits the image data. Notify the rate integration unit 1020.

透過率積算部1020は、選択部1010より通知された、第1領域画素値(R)に基づいて、第1領域の液晶偏向度を算出する。これにより、第1領域における赤外線の液晶透過率の積算値を算出することができる。同様に、透過率積算部1020は、選択部1010より通知された、第2領域画素値(R)に基づいて、第2領域の液晶偏向度を算出する。これにより、第2領域における赤外線の液晶透過率の積算値を算出することができる。 The transmittance integrating unit 1020 calculates the liquid crystal deflection degree in the first region based on the first region pixel value (R) notified by the selection unit 1010. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the first region. Similarly, the transmittance integrating unit 1020 calculates the liquid crystal deflection degree in the second region based on the second region pixel value (R) notified by the selection unit 1010. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the second region.

同様に、透過率積算部1020は、選択部1010より通知された、第3領域画素値(R)に基づいて、第3領域の液晶偏向度を算出する。これにより、第3領域における赤外線の液晶透過率の積算値を算出することができる。同様に、透過率積算部1020は、選択部1010より通知された第4領域画素値(R)に基づいて、第4領域の液晶偏向度を算出する。これにより、第4領域における赤外線の液晶透過率の積算値を算出することができる。 Similarly, the transmittance integrating unit 1020 calculates the liquid crystal deflection degree in the third region based on the third region pixel value (R) notified by the selection unit 1010. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the third region. Similarly, the transmittance integrating unit 1020 calculates the liquid crystal deflection degree in the fourth region based on the fourth region pixel value (R) notified by the selection unit 1010. This makes it possible to calculate the integrated value of the infrared liquid crystal transmittance in the fourth region.

補正部1030は、第1LED131投光時の投光量を、第1領域における赤外線の液晶透過率の積算値を用いて補正する。第1領域を透過した赤外線の光量は、第1領域における赤外線の液晶透過率の積算値によって決まるからである。 The correction unit 1030 corrects the amount of light projected when the first LED 131 is flooded by using the integrated value of the liquid crystal transmittance of infrared rays in the first region. This is because the amount of infrared light transmitted through the first region is determined by the integrated value of the infrared liquid crystal transmittance in the first region.

同様に、補正部1030は、第2LED132投光時の投光量を、第2領域における赤外線の液晶透過率の積算値を用いて補正する。第2領域を透過した赤外線の光量は、第2領域における赤外線の液晶透過率の積算値によって決まるからである。同様に、補正部1030は、第3LED133投光時の投光量を、第3領域における赤外線の液晶透過率の積算値を用いて補正する。第3領域を透過した赤外線の光量は、第3領域における赤外線の液晶透過率の積算値によって決まるからである。同様に、補正部1030は、第4LED134投光時の投光量を、第4領域における赤外線の液晶透過率の積算値を用いて補正する。第4領域を透過した赤外線の光量は、第4領域における赤外線の液晶透過率の積算値によって決まるからである。 Similarly, the correction unit 1030 corrects the amount of light projected when the second LED 132 is projected using the integrated value of the liquid crystal transmittance of infrared rays in the second region. This is because the amount of infrared light transmitted through the second region is determined by the integrated value of the infrared liquid crystal transmittance in the second region. Similarly, the correction unit 1030 corrects the amount of light projected at the time of projecting the third LED 133 by using the integrated value of the liquid crystal transmittance of infrared rays in the third region. This is because the amount of infrared light transmitted through the third region is determined by the integrated value of the infrared liquid crystal transmittance in the third region. Similarly, the correction unit 1030 corrects the amount of light projected at the time of projecting the fourth LED 134 by using the integrated value of the liquid crystal transmittance of infrared rays in the fourth region. This is because the amount of infrared light transmitted through the fourth region is determined by the integrated value of the infrared liquid crystal transmittance in the fourth region.

このように、赤外線LEDの位置に応じた領域ごとに、画像データのR値に応じた液晶透過率の積算値を算出し、各領域の投光量を補正する。これにより、投光量補正部910では、画像データのR値の変化に伴う赤外線の透過率の変化(つまり、赤外線照射量の変化)の影響を排除する、補正後の投光量を出力することができる。 In this way, the integrated value of the liquid crystal transmittance corresponding to the R value of the image data is calculated for each region corresponding to the position of the infrared LED, and the amount of light projected in each region is corrected. As a result, the light projection correction unit 910 can output the corrected light projection amount, which eliminates the influence of the change in the infrared transmittance (that is, the change in the infrared irradiation amount) due to the change in the R value of the image data. can.

<検知処理の流れ>
次に、表示装置100において実行される検知処理の流れについて説明する。図11は、第2の実施形態に係る表示装置において実行される検知処理の流れを示すフローチャートである。なお、図8を用いて説明した検知処理との相違点は、ステップS1101からS1104である。
<Flow of detection process>
Next, the flow of the detection process executed by the display device 100 will be described. FIG. 11 is a flowchart showing the flow of the detection process executed in the display device according to the second embodiment. The difference from the detection process described with reference to FIG. 8 is in steps S1101 to S1104.

ステップS1101において、投光量補正部910は、第n領域の画像データの画素値(R)を表示部530から取得し、液晶透過率の積算値を算出する。ステップS1102において、投光量補正部910は、液晶透過率の積算値を用いて、デフォルトの投光量を補正し、補正後の投光量を出力する。 In step S1101, the floodlight correction unit 910 acquires the pixel value (R) of the image data in the nth region from the display unit 530 and calculates the integrated value of the liquid crystal transmittance. In step S1102, the light projection amount correction unit 910 corrects the default light projection amount by using the integrated value of the liquid crystal transmittance, and outputs the corrected light projection amount.

ステップS1103において、Ir-LED制御部920は、算出された投光量で、第nLEDを制御することで投光を行い、受光量取得部930は、PD140が受光したPD信号に基づいて、受光量を取得する。 In step S1103, the Ir-LED control unit 920 performs light projection by controlling the nth LED with the calculated light projection amount, and the light reception amount acquisition unit 930 receives light light based on the PD signal received by the PD 140. To get.

ステップS1104において、検知部540は、取得された受光量に基づいて、操作領域において操作が行われたか否かを判定し、操作が行われたと判定した場合には、検知結果を全体制御部510に出力する。 In step S1104, the detection unit 540 determines whether or not an operation has been performed in the operation area based on the acquired light receiving amount, and if it is determined that the operation has been performed, the detection result is determined by the overall control unit 510. Output to.

<まとめ>
以上の説明から明らかなように、第2の実施形態に係る表示装置100は、
・表示領域前方の操作領域に赤外線を投光する第1LED~第4LEDを有する。
・第1LED~第4LEDが順次投光し、それぞれの投光タイミングにおいてPDが受光した赤外線の受光量を取得する。
・第1LED~第4LEDが順次投光する際に、表示領域に表示する画像データの各画素値(R値)を、第1LED~第4LEDの位置に応じた領域ごとに取得する。
・取得した各領域の画素値(R値)に基づいて、領域ごとに、液晶透過率の積算値を算出し、算出した液晶透過率の積算値に基づいて、第1LED~第4LED投光時の投光量を補正する。
<Summary>
As is clear from the above description, the display device 100 according to the second embodiment is
-The operation area in front of the display area has the first LED to the fourth LED that emit infrared rays.
-The first LED to the fourth LED emit light in sequence, and the amount of infrared rays received by the PD at each light projection timing is acquired.
-When the first LED to the fourth LED sequentially project light, each pixel value (R value) of the image data to be displayed in the display area is acquired for each area corresponding to the position of the first LED to the fourth LED.
-Based on the acquired pixel value (R value) of each area, the integrated value of the liquid crystal transmittance is calculated for each area, and based on the calculated integrated value of the liquid crystal transmittance, the first LED to the fourth LED are flooded. Correct the amount of light projected.

これにより、第2の実施形態によれば、表示領域に表示される画像データのR値の変化に応じて、赤外線の投光量を補正することが可能となり、表示領域に表示される画像データのR値の変化に伴う赤外線照射量の変化の影響を除外することができる。 As a result, according to the second embodiment, it is possible to correct the amount of infrared light projected according to the change in the R value of the image data displayed in the display area, and the image data displayed in the display area can be corrected. It is possible to exclude the influence of the change in the infrared irradiation amount due to the change in the R value.

この結果、第2の実施形態によれば、表示領域前方の操作領域において行われる操作を検知する表示装置において、検知精度を向上させることができる。 As a result, according to the second embodiment, the detection accuracy can be improved in the display device that detects the operation performed in the operation area in front of the display area.

[その他の実施形態]
上記第1及び第2の実施形態では、繰り返し周期ごとに、操作領域において操作が行われたか否かを判定する構成としたが、操作領域において操作が行われたか否かの判定方法はこれに限定されない。例えば、繰り返し周期複数回分の各赤外線LEDの投光タイミングにおいて投光された赤外線の反射光の受光量に基づいて、操作領域において操作が行われたか否かを、総合的に判定するように構成してもよい。
[Other embodiments]
In the first and second embodiments described above, it is configured to determine whether or not an operation has been performed in the operation area for each repetition cycle, but this is the method for determining whether or not an operation has been performed in the operation area. Not limited. For example, it is configured to comprehensively determine whether or not an operation has been performed in the operation area based on the amount of received infrared light reflected at the projection timing of each infrared LED for a plurality of repetition cycles. You may.

また、上記第1及び第2の実施形態では、表示装置100に、第1LED131~第4LED134の4個の赤外線LEDを配置する構成とした。しかしながら、赤外線LEDの数はこれに限定されず、複数個であれば何個でもよい。この場合、選択部610、1010では、赤外線LEDの数に応じた数の領域それぞれに属する画像データの画素値(R値)を順次取得するものとする。また、配置する位置も、図1に示した位置に限定されない。 Further, in the first and second embodiments, the display device 100 is configured to arrange four infrared LEDs of the first LED 131 to the fourth LED 134. However, the number of infrared LEDs is not limited to this, and any number may be used as long as there are a plurality of infrared LEDs. In this case, the selection units 610 and 1010 sequentially acquire the pixel values (R values) of the image data belonging to each of the number of regions corresponding to the number of infrared LEDs. Further, the position to be arranged is not limited to the position shown in FIG.

また、上記第1及び第2の実施形態では、表示装置100を一体的に構成するものとして説明したが、表示装置100は、複数の装置で構成してもよい。例えば、表示装置100において、制御装置300と液晶装置110(及び第1LED131~第4LED134、PD140)とは別体として構成してもよい。 Further, in the first and second embodiments described above, the display device 100 has been described as being integrally configured, but the display device 100 may be configured by a plurality of devices. For example, in the display device 100, the control device 300 and the liquid crystal device 110 (and the first LED 131 to the fourth LED 134, PD 140) may be configured as separate bodies.

また、上記第1及び第2の実施形態では、表示装置100を、車両に搭載するものとして説明したが、車両以外の移動体や移動体以外の設備に搭載してもよい。 Further, in the first and second embodiments, the display device 100 has been described as being mounted on a vehicle, but it may be mounted on a moving body other than the vehicle or equipment other than the moving body.

なお、上記実施形態に挙げた構成等に、その他の要素との組み合わせ等、ここで示した構成に本発明が限定されるものではない。これらの点に関しては、本発明の趣旨を逸脱しない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。 The present invention is not limited to the configurations shown here, such as combinations with other elements in the configurations and the like described in the above embodiments. These points can be changed without departing from the spirit of the present invention, and can be appropriately determined according to the application form thereof.

100 :表示装置
110 :液晶装置
131~134 :第1~第4LED
140 :PD
200 :導光板
300 :制御装置
310 :表示制御部
510 :全体制御部
520 :Ir-LED制御部
530 :表示部
540 :検知部
550 :受光量補正部
610 :選択部
620 :透過率積算部
630 :補正部
640 :受光量取得部
910 :投光量補正部
920 :Ir-LED制御部
930 :受光量取得部
1010 :選択部
1020 :透過率積算部
1030 :補正部
100: Display device 110: Liquid crystal device 131 to 134: 1st to 4th LEDs
140: PD
200: Light guide plate 300: Control device 310: Display control unit 510: Overall control unit 520: Ir-LED control unit 530: Display unit 540: Detection unit 550: Light receiving amount correction unit 610: Selector unit 620: Transmittance integration unit 630 : Correction unit 640: Light receiving amount acquisition unit 910: Light projection amount correction unit 920: Ir-LED control unit 930: Light receiving amount acquisition unit 1010: Selection unit 1020: Transmittance integration unit 1030: Correction unit

Claims (4)

液晶の表示領域のRフィルタを透過し、前方の操作領域に赤外線を投光する投光器と、
前記投光器が投光した際の反射光を受光する受光器と、
前記液晶の表示領域に表示される画像データの各画素のR値に基づいて算出した液晶偏向度から、赤外線の液晶透過率の積算値を算出し、前記投光器が投光する赤外線の光量、または、前記受光器が受光する反射光の光量を、前記赤外線の液晶透過率の積算値を用いて補正する補正部と
を有することを特徴とする表示装置。
A floodlight that transmits infrared rays to the operation area in front of the LCD through the R filter in the display area of the liquid crystal display.
A receiver that receives the reflected light when the floodlight is projected, and a receiver that receives the reflected light.
From the liquid crystal deflection degree calculated based on the R value of each pixel of the image data displayed in the liquid crystal display area, the integrated value of the infrared liquid crystal transmittance is calculated, and the amount of infrared light projected by the floodlight, or A display device comprising a correction unit that corrects the amount of reflected light received by the light receiver by using the integrated value of the liquid crystal transmittance of the infrared rays .
前記補正部は、
前記表示領域のうち、複数の前記投光器の位置に応じた領域に表示される前記画像データの各画素のR値に基づいて算出したそれぞれの液晶偏向度から、赤外線の液晶透過率の積算値をそれぞれ算出し、前記複数の投光器がそれぞれ投光する赤外線の光量、または、前記受光器が受光する反射光の光量を、対応する前記赤外線の液晶透過率の積算値を用いて補正することを特徴とする請求項に記載の表示装置。
The correction unit
From the liquid crystal deflection degree calculated based on the R value of each pixel of the image data displayed in the area corresponding to the position of the plurality of floodlights in the display area, the integrated value of the infrared liquid crystal transmittance is calculated. It is characterized in that each is calculated and the amount of infrared light emitted by the plurality of floodlights or the amount of reflected light received by the light receiver is corrected by using the integrated value of the corresponding infrared liquid crystal transmittance. The display device according to claim 1 .
前記投光器が補正後の光量で赤外線を投光した際に、前記受光器が受光した反射光の光量、または、前記投光器が投光した際に前記受光器が受光した反射光の光量を補正した補正後の光量、に基づいて、前記操作領域において操作が行われたか否かを検知する検知部を更に有することを特徴とする請求項1または2に記載の表示装置。 The amount of reflected light received by the light receiver when the floodlight was projected with the corrected light amount, or the amount of reflected light received by the light receiver when the light projector was projected was corrected. The display device according to claim 1 or 2 , further comprising a detection unit that detects whether or not an operation has been performed in the operation area based on the corrected light amount. 液晶の表示領域のRフィルタを透過し、前方の操作領域に赤外線を投光する投光器と、
前記投光器が投光した際の反射光を受光する受光器と、
を有する表示装置における補正方法であって、
前記液晶の表示領域に表示される画像データの各画素のR値に基づいて算出した液晶偏向度から、赤外線の液晶透過率の積算値を算出し、前記投光器が投光する赤外線の光量、または、前記受光器が受光する反射光の光量を、前記赤外線の液晶透過率の積算値を用いて補正することを特徴とする補正方法。
A floodlight that transmits infrared rays to the operation area in front of the LCD through the R filter in the display area of the liquid crystal display.
A receiver that receives the reflected light when the floodlight is projected, and a receiver that receives the reflected light.
It is a correction method in a display device having
From the liquid crystal deflection degree calculated based on the R value of each pixel of the image data displayed in the liquid crystal display area, the integrated value of the infrared liquid crystal transmittance is calculated, and the amount of infrared light projected by the floodlight, or A correction method comprising correcting the amount of reflected light received by the light receiver by using the integrated value of the liquid crystal transmittance of the infrared rays .
JP2018172950A 2018-09-14 2018-09-14 Display device and correction method Active JP7062341B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018172950A JP7062341B2 (en) 2018-09-14 2018-09-14 Display device and correction method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018172950A JP7062341B2 (en) 2018-09-14 2018-09-14 Display device and correction method

Publications (2)

Publication Number Publication Date
JP2020046775A JP2020046775A (en) 2020-03-26
JP7062341B2 true JP7062341B2 (en) 2022-05-06

Family

ID=69899668

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018172950A Active JP7062341B2 (en) 2018-09-14 2018-09-14 Display device and correction method

Country Status (1)

Country Link
JP (1) JP7062341B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110187653A1 (en) 2010-02-01 2011-08-04 Acer Incorporated Touch input method and device thereof
JP2012168748A (en) 2011-02-15 2012-09-06 Denso Corp Light projection system and face photographing system
JP2013062769A (en) 2011-09-15 2013-04-04 Funai Electric Co Ltd Projector
JP2017173285A (en) 2016-03-26 2017-09-28 アルパイン株式会社 Object approach detection device and object approach detection method
JP2018507573A (en) 2014-12-01 2018-03-15 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツングRobert Bosch Gmbh Projection apparatus and method for projecting an image pixel by pixel

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110187653A1 (en) 2010-02-01 2011-08-04 Acer Incorporated Touch input method and device thereof
JP2012168748A (en) 2011-02-15 2012-09-06 Denso Corp Light projection system and face photographing system
JP2013062769A (en) 2011-09-15 2013-04-04 Funai Electric Co Ltd Projector
JP2018507573A (en) 2014-12-01 2018-03-15 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツングRobert Bosch Gmbh Projection apparatus and method for projecting an image pixel by pixel
JP2017173285A (en) 2016-03-26 2017-09-28 アルパイン株式会社 Object approach detection device and object approach detection method

Also Published As

Publication number Publication date
JP2020046775A (en) 2020-03-26

Similar Documents

Publication Publication Date Title
US9639165B2 (en) Position detection system and control method of position detection system
US10429994B2 (en) Position detection device, position detection system, and position detection method
US20130181888A1 (en) Head-mounted display
JP2019074465A (en) Detection system and determination method
CN107728410B (en) Image distortion correction method for laser projector and laser projector
US10194123B2 (en) Boundary timing controller for display apparatus
JP2015158888A (en) Position detection device, position detection system, and control method of position detection device
EP2916201B1 (en) Position detecting device and position detecting method
US8714749B2 (en) Projection display device with position detection function
JP2011093413A (en) Display device for vehicle
JP7062341B2 (en) Display device and correction method
US8847918B2 (en) Optical position detection device and display device with position detection function
US20130257702A1 (en) Image projecting apparatus, image projecting method, and computer program product
JP6206180B2 (en) Image display device
JP2014219572A (en) Display device and control method of the same
JP2016114991A (en) Position detector, image projection device, and image operation system
JPWO2017094082A1 (en) Curvature information deriving device
JP2009038482A (en) Remote controller
JP2020190617A (en) Virtual image display device
US20170034490A1 (en) Interactive projector and method of correcting z-coordinate of the same
JP2015158883A (en) Operation device, position detection system and control method of operation device
JP2011123584A (en) Optical position detection device and display device with position detection function
WO2016185678A1 (en) Blind-spot display device and blind-spot display method
JP2010055346A (en) Pointer display device
US20150370361A1 (en) Detecting device and input device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220419

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220419

R150 Certificate of patent or registration of utility model

Ref document number: 7062341

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150