JP6450493B1 - Touch panel system for flexible display - Google Patents

Touch panel system for flexible display Download PDF

Info

Publication number
JP6450493B1
JP6450493B1 JP2018145536A JP2018145536A JP6450493B1 JP 6450493 B1 JP6450493 B1 JP 6450493B1 JP 2018145536 A JP2018145536 A JP 2018145536A JP 2018145536 A JP2018145536 A JP 2018145536A JP 6450493 B1 JP6450493 B1 JP 6450493B1
Authority
JP
Japan
Prior art keywords
touch panel
flexible display
fluid
sheet
panel system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018145536A
Other languages
Japanese (ja)
Other versions
JP2020021334A (en
Inventor
西田 誠
誠 西田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netappli Co Ltd
Original Assignee
Netappli Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netappli Co Ltd filed Critical Netappli Co Ltd
Priority to JP2018145536A priority Critical patent/JP6450493B1/en
Application granted granted Critical
Publication of JP6450493B1 publication Critical patent/JP6450493B1/en
Publication of JP2020021334A publication Critical patent/JP2020021334A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

【課題】 装置構成が簡易で周囲の温度の影響を受けにくく、変形可能であり、ユーザがフレキシブルディスプレイに直接触れることができるフレキシブルディスプレイ用のタッチパネルシステムを提供する。
【解決手段】 タッチパネルシステム1は、一方の面11が可撓性を有する材料から成り、他方の面12が可視光透過性を有する材料から成り、両面に挟まれた空間内に着色された流体20を収容する袋状のタッチパネル本体部V、弾性変形可能なシート17、他方の面を撮影するカメラ50、撮影画像の画素のRGB値を解析する画像解析部100を備える。フレキシブルディスプレイ200の変形により発生する外力を受けて一方の面と他方の面とが近接し、当該近接箇所14から流体が移動することにより生じる他方の面の色の変化をカメラが撮影し、撮影画像の画素のRGB値解析結果に基づいて近接箇所の座標等を算出してフレキシブルディスプレイの映像に反映させる。
【選択図】図1
PROBLEM TO BE SOLVED: To provide a touch panel system for a flexible display which is simple in apparatus configuration, hardly affected by ambient temperature, is deformable, and allows a user to directly touch the flexible display.
SOLUTION: A touch panel system 1 includes one surface 11 made of a material having flexibility and the other surface 12 made of a material having visible light transmission, and a fluid colored in a space sandwiched between both surfaces. 20 includes a bag-like touch panel main body V that accommodates 20, an elastically deformable sheet 17, a camera 50 that captures the other surface, and an image analysis unit 100 that analyzes RGB values of pixels of the captured image. The external surface generated by deformation of the flexible display 200 receives one surface and the other surface close to each other, and the camera shoots the color change of the other surface caused by the fluid moving from the adjacent location 14 Based on the RGB value analysis result of the pixel of the image, the coordinates of the adjacent part are calculated and reflected on the image of the flexible display.
[Selection] Figure 1

Description

本発明は、着色した流体を内包することで任意形状に変形させることができるフレキシブルディスプレイ用のタッチパネルシステムに関する。   The present invention relates to a touch panel system for a flexible display that can be deformed into an arbitrary shape by containing a colored fluid.

コンピュータや携帯情報端末などの電子情報機器には入力装置と表示装置(ディスプレイ)とを組み合わせたタッチパネルシステムが搭載されている。
タッチパネルシステムには静電容量方式、抵抗膜方式、超音波表面弾性波方式、光学方式(赤外線光学イメージング方式)などの種々の方式が存在する。
また、本願発明者が発明したタッチパネルシステムは、内部に着色された流体を収容する袋状のタッチパネル本体部と、カメラと、カメラの撮影画像の画素のRGB値を解析する画像解析部とを備える。タッチパネル本体部に外力が作用することでタッチパネル本体部の一方の面と他方の面が近接して当該近接箇所から流体が移動することにより生じる他方の面の色の変化をカメラで撮影し、画像解析部による撮影画像の画素のRGB値解析結果に基づいて近接箇所の座標や形状を算出し、映像表示装置の映像に反映させるものである(特許文献1)。このタッチパネルシステムは袋状のタッチパネル本体部の内部に流体が入っているため変形可能であり、任意の形状のタッチパネルを形成出来るという利点や、構成が簡易で製造コストが安いという利点がある。
Electronic information devices such as computers and portable information terminals are equipped with a touch panel system that combines an input device and a display device (display).
There are various types of touch panel systems such as a capacitive method, a resistive film method, an ultrasonic surface acoustic wave method, and an optical method (infrared optical imaging method).
The touch panel system invented by the inventor of the present application includes a bag-like touch panel main body that contains a colored fluid therein, a camera, and an image analysis unit that analyzes RGB values of pixels of a captured image of the camera. . An external force is applied to the touch panel body, and one surface of the touch panel body and the other surface come close to each other. Based on the RGB value analysis result of the pixel of the photographed image by the analysis unit, the coordinates and shape of the adjacent portion are calculated and reflected in the video of the video display device (Patent Document 1). This touch panel system can be deformed because fluid is contained in the bag-shaped touch panel body, and has an advantage that a touch panel having an arbitrary shape can be formed and an advantage that the configuration is simple and the manufacturing cost is low.

特許第6349048号公報Japanese Patent No. 6349048

しかし、上記従来技術では以下の問題がある。
上記の静電容量方式、抵抗膜方式、超音波表面弾性波方式、光学方式(赤外線光学イメージング方式)はいずれも装置構成が複雑なため、製造コストが嵩むという問題や故障が生じやすいという問題がある。また、使用時にユーザが任意の形状に変形して使用出来ないという問題もある。
また、上記特許文献1の技術はユーザがタッチパネル本体部に触れた位置(近接箇所)の座標や形状に基づいて、別途配置した映像表示装置の映像を変化させるものであり、ユーザが映像表示装置に触れる仕組みになっていない。すなわち、ユーザが映像表示面に触れると、その位置の映像が変化するという仕組みになっていないという問題がある。
However, the above prior art has the following problems.
The above-described capacitance method, resistive film method, ultrasonic surface acoustic wave method, and optical method (infrared optical imaging method) are all complicated in apparatus configuration, so that there is a problem that production costs increase and failures are likely to occur. is there. Also, there is a problem that the user cannot use it by deforming it into an arbitrary shape at the time of use.
Further, the technique of Patent Document 1 changes the image of a separately arranged video display device based on the coordinates and shape of the position (proximity location) where the user touches the touch panel body, and the user changes the video display device. It is not a mechanism to touch. That is, there is a problem that when the user touches the video display surface, the video at that position does not change.

本発明は上記問題に鑑み、装置構成が簡易で周囲の温度の影響を受けにくく、変形可能であり、ユーザがフレキシブルディスプレイに直接触れることができるフレキシブルディスプレイ用のタッチパネルシステムを提供することを課題とする。   In view of the above problems, it is an object of the present invention to provide a touch panel system for a flexible display that has a simple device configuration, is not easily affected by ambient temperature, can be deformed, and can be directly touched by a user. To do.

本発明のフレキシブルディスプレイ用のタッチパネルシステムは、一方の面が可撓性を有する材料から成り、他方の面が可視光透過性を有する材料から成り、前記一方の面と前記他方の面とに挟まれた空間内に着色された流体を収容する袋状のタッチパネル本体部と、弾性変形可能なシートと、可視光領域の波長の光を撮影可能であり前記他方の面を撮影するカメラと、前記カメラの撮影画像の画素のRGB値を解析する画像解析部とを備えており、フレキシブルディスプレイと一体に使用されるものであり、前記シートはその裏面が前記一方の面と密着しており、その表面が前記フレキシブルディスプレイの背面と密着しており、前記フレキシブルディスプレイの変形により発生する外力を受けて前記一方の面と前記他方の面とが近接し、当該近接箇所から前記流体が移動することにより生じる前記他方の面の色の変化を前記カメラが撮影し、前記画像解析部は前記撮影画像の画素のRGB値解析結果に基づいて、前記他方の面上の前記近接箇所の座標と前記近接箇所の形状の2つのうち少なくとも1つを算出して前記フレキシブルディスプレイの映像に反映させることを特徴とする。   In the touch panel system for a flexible display of the present invention, one surface is made of a material having flexibility, the other surface is made of a material having visible light permeability, and is sandwiched between the one surface and the other surface. A bag-like touch panel main body containing a colored fluid in the space formed, an elastically deformable sheet, a camera capable of photographing light of a wavelength in the visible light region and photographing the other surface, An image analysis unit that analyzes RGB values of pixels of a captured image of the camera, and is used integrally with a flexible display, and the back surface of the sheet is in close contact with the one surface. The surface is in close contact with the back surface of the flexible display, the one surface and the other surface are close to each other by receiving an external force generated by the deformation of the flexible display, The camera shoots a change in color of the other surface caused by the fluid moving from a contact point, and the image analysis unit is arranged on the other surface based on an RGB value analysis result of pixels of the captured image. In this case, at least one of the coordinates of the proximity location and the shape of the proximity location is calculated and reflected on the image of the flexible display.

また、前記シートの厚さが、前記フレキシブルディスプレイの背面の凸部の高さよりも大きいことを特徴とする。
また、前記一方の面が可視光透過性を有する材料で形成され、且つ前記シートの裏面が単色に着色されていることを特徴とする。
また、前記シートの裏面に複数の突起部を備えることを特徴とする。
また、前記一方の面或は他方の面のいずれの面から前記空間側に向いた複数の突起部を備えることを特徴とする。
また、複数の前記突起部各々の長さが異なることを特徴とする。
また、前記突起部が金属製であり、前記フレキシブルディスプレイから発せられる熱を前記シート及び前記突起部を介して前記流体に伝えることで水冷効率を向上させることを特徴とする。
また、前記流体が液体である事を特徴とする。
Further, the thickness of the sheet is larger than the height of the convex portion on the back surface of the flexible display.
Further, the one surface is formed of a material having visible light permeability, and the back surface of the sheet is colored in a single color.
In addition, a plurality of protrusions are provided on the back surface of the sheet.
In addition, a plurality of protrusions facing the space side from any one of the one surface or the other surface are provided.
Further, the length of each of the plurality of protrusions is different.
Further, the protrusion is made of metal, and heat cooling efficiency is improved by transferring heat generated from the flexible display to the fluid through the sheet and the protrusion.
Further, the fluid is a liquid.

また、前記画像解析部は、前記流体のRGB値と前記撮影画像の画素のRGB値とを比較することで、前記近接箇所における前記一方の面と前記他方の面との近接距離を算出することを特徴とする。
また、前記流体の色又は透明度を変更できることを特徴とする。
また、前記タッチパネル本体部が人体の一部を模した形状であることを特徴とする。
また、前記タッチパネル本体部が前記空間側に窪んだ第1格納部を備えることを特徴とする。
Further, the image analysis unit calculates the proximity distance between the one surface and the other surface at the proximity location by comparing the RGB value of the fluid and the RGB value of the pixel of the captured image. It is characterized by.
In addition, the color or transparency of the fluid can be changed.
Further, the touch panel main body has a shape imitating a part of a human body.
The touch panel body may include a first storage portion that is recessed toward the space.

また、前記流体から前記タッチパネル本体部に作用する圧力を制御するための流体圧力制御機構を備えており、前記流体圧力制御機構は前記近接箇所の座標と前記近接箇所の形状の2つのうち少なくとも1つに基づいて前記圧力を変化させることを特徴とする。
本発明のフレキシブルディスプレイ用のタッチパネルシステムは、一方の面が可撓性を有する材料から成り、他方の面が可視光透過性を有する材料から成り、前記一方の面と前記他方の面とに挟まれた空間内に着色された流体を収容する袋状のタッチパネル本体部と、弾性変形可能なシートと、可視光領域の波長の光を撮影可能であり前記他方の面を撮影するカメラと、前記カメラの撮影画像の画素のRGB値を解析する画像解析部とを備えており、フレキシブルディスプレイと一体に使用されるものであり、前記シートは前記タッチパネル本体部の内部においてその表面が前記一方の面と密着しており、且つその裏面に複数の前記空間側に向いた突起部を備えており、前記一方の面が前記フレキシブルディスプレイの背面と密着しており、前記フレキシブルディスプレイの変形により発生する外力を受けて前記一方の面と前記他方の面とが近接し、当該近接箇所から前記流体が移動することにより生じる前記他方の面の色の変化を前記カメラが撮影し、前記画像解析部は前記撮影画像の画素のRGB値解析結果に基づいて、前記他方の面上の前記近接箇所の座標と前記近接箇所の形状の2つのうち少なくとも1つを算出して前記フレキシブルディスプレイの映像に反映させることを特徴とする。
In addition, a fluid pressure control mechanism for controlling the pressure acting on the touch panel main body from the fluid is provided, and the fluid pressure control mechanism is at least one of the coordinates of the proximity location and the shape of the proximity location. The pressure is changed based on the pressure.
In the touch panel system for a flexible display of the present invention, one surface is made of a material having flexibility, the other surface is made of a material having visible light permeability, and is sandwiched between the one surface and the other surface. A bag-like touch panel main body containing a colored fluid in the space formed, an elastically deformable sheet, a camera capable of photographing light of a wavelength in the visible light region and photographing the other surface, An image analysis unit that analyzes RGB values of pixels of a photographed image of the camera, and is used integrally with a flexible display, and the surface of the sheet is the one surface inside the touch panel body unit And having a plurality of protrusions facing the space on the back surface thereof, the one surface being in close contact with the back surface of the flexible display, The camera captures a change in the color of the other surface that occurs when the one surface and the other surface come close to each other in response to an external force generated by deformation of the rewritable display and the fluid moves from the proximity location. Then, the image analysis unit calculates at least one of the coordinates of the proximity location on the other surface and the shape of the proximity location based on the RGB value analysis result of the pixel of the captured image, and It is reflected in the video of a flexible display.

本発明のタッチパネルシステムでは、ユーザがフレキシブルディスプレイの映像表示面を指等で押して外力を作用させると、フレキシブルディスプレイ及びシートが変形し、更にタッチパネル本体部の一方の面と他方の面とが近接し、当該近接箇所から流体が移動する。近接箇所から流体が移動することにより他方の面の色が変化するので、この色の変化をカメラで撮影する。画像解析部はカメラの撮影画像に基づいて他方の面上の近接箇所の座標と近接箇所の形状の2つのうち少なくとも1つを算出し、フレキシブルディスプレイの映像に反映させる。
本発明のタッチパネルシステムは、弾性変形可能な柔軟なシートをタッチパネル本体部の一方の面とフレキシブルディスプレイの背面の間に密着して挟み込んでいる。一般的にフレキシブルディスプレイの背面(映像表示面と反対側の面)には有機EL素子等に給電するための薄膜の回路パターンや帯状の導線或はIC等が配置されており、これらが凸部を形成している。仮に弾性変形可能なシートを用いずに、フレキシブルディスプレイの背面をタッチパネル本体部の一方の面に載せた場合、上記凸部の周囲が一方の面に密着せず、空隙が生じてしまうため、上記近接箇所の色の変化をカメラで撮影することが難しくなるという問題がある。本発明では弾性変形可能なシートは上記凸部で押された箇所が窪むことでシートの裏面全体をタッチパネル本体部の一方の面に確実に密着させることができる。したがって、フレキシブルディスプレイの背面の形状の影響を受けずに近接箇所の色の変化をカメラで正確に撮影できる。
In the touch panel system of the present invention, when the user presses the image display surface of the flexible display with a finger or the like to apply an external force, the flexible display and the sheet are deformed, and the one surface and the other surface of the touch panel main body are close to each other. The fluid moves from the adjacent location. Since the color of the other surface changes as the fluid moves from a nearby location, this color change is photographed with a camera. The image analysis unit calculates at least one of the coordinates of the proximity location on the other surface and the shape of the proximity location based on the captured image of the camera, and reflects it on the image of the flexible display.
In the touch panel system of the present invention, a flexible sheet that can be elastically deformed is closely attached between one surface of the touch panel body and the back surface of the flexible display. In general, the back surface of the flexible display (the surface opposite to the image display surface) is provided with a thin-film circuit pattern, a strip-shaped conductor or IC, etc. for supplying power to the organic EL elements, etc. Is forming. If the back surface of the flexible display is placed on one surface of the touch panel main body without using an elastically deformable sheet, the periphery of the convex portion does not adhere to one surface, and a gap is generated. There is a problem that it is difficult to capture the color change of the adjacent portion with a camera. In the present invention, the elastically deformable sheet is recessed at the portion pressed by the convex portion, so that the entire back surface of the sheet can be securely adhered to one surface of the touch panel body. Therefore, it is possible to accurately capture the change in the color of the adjacent portion with the camera without being affected by the shape of the back surface of the flexible display.

また、単色で着色したシートを使用することでフレキシブルディスプレイの背面に模様や文字が印刷されていても、カメラの撮影画像に写らないので、タッチパネルシステムを正常に動作させることができる(同様の効果は前記一方の面を着色する事でも得られる)。
また、タッチパネル本体部の内部に流体(液体又は気体)を収容しているため、従来のタッチパネルとは異なり、使用形態に応じてユーザ自身で変形が容易であり、柔らかい触り心地のタッチパネルを得られる。
また、他方の面も可撓性を有する材料で構成すれば、タッチパネル本体部内の流体を外部に排出することでタッチパネル本体部を圧縮収納でき、可搬性を高めることができる。
視野角が広い広角タイプのカメラを用いればカメラ一台のみでタッチパネル本体部の面積(一方の面や他方の面の面積)の大小に関係なく近接箇所を撮影でき、また、従来のような圧電素子を用いたタッチパネルと比較してタッチパネル本体部を大型化した際のコストを抑えることができる。
Also, by using a sheet colored in a single color, even if a pattern or text is printed on the back of the flexible display, it will not appear in the captured image of the camera, so the touch panel system can operate normally (similar effects Can also be obtained by coloring one of the surfaces).
In addition, since a fluid (liquid or gas) is contained inside the touch panel body, unlike a conventional touch panel, the user can easily deform the touch panel according to the usage pattern, and a touch panel with a soft touch can be obtained. .
If the other surface is also made of a flexible material, the touch panel body can be compressed and stored by discharging the fluid in the touch panel body to the outside, and the portability can be improved.
If a wide-angle camera with a wide viewing angle is used, it is possible to photograph close-up areas with only one camera regardless of the size of the touch panel body (the area of one or the other surface). Compared to a touch panel using elements, the cost when the touch panel body is enlarged can be reduced.

また、他方の面も可撓性を有する材料で構成すれば、タッチパネル本体部内の流体を外部
に排出することで、フレキシブルディスプレイごとタッチパネル本体部を圧縮収納でき、可搬性を高めることができる。
シートの厚さを、上記凸部の高さより大きくしておくことで、シートの凸部で押された箇所の窪みの深さを充分にとることができ、シートの裏面全体をタッチパネル本体部の一方の面により確実に密着させることができる。
一方の面を可視光透過性を有する材料で形成し、且つシートの裏面を単色にすることで、カメラから見たタッチパネル本体部の一方の面の全体の色が均一化されるので、近接箇所の色の変化をカメラから正確に撮影できる。
また、一方の面を可視光透過性を有する材料で形成し、且つシートの裏面の色と流体の色を異ならせることにすれば、それら2つの色のRGB値を用いてフィルタリングする事により、流体のRGB値のみでフィルタリングする場合と比較して近接箇所の座標等を算出する際の精度を飛躍的に高めることができる。また、画像解析部で2つの色が混ざった中間色部分の画素を取得する事により、ユーザが一方の面を他方の面に密着させない程度の弱い力で接触した状態、すなわち完全密着と非接触の中間の状態を検知できる。
If the other surface is also made of a flexible material, the touch panel body can be compressed and housed together with the flexible display by discharging the fluid in the touch panel body to the outside, and the portability can be improved.
By making the thickness of the sheet larger than the height of the convex part, it is possible to sufficiently take the depth of the depression pressed by the convex part of the sheet, and the entire back surface of the sheet One surface can be securely adhered.
By forming one surface with a material having visible light transparency and making the back surface of the sheet a single color, the entire color of one surface of the touch panel body as seen from the camera is made uniform. The change in color can be accurately captured from the camera.
In addition, if one side is formed of a material having visible light transparency and the color of the back side of the sheet is different from the color of the fluid, by filtering using the RGB values of these two colors, Compared with the case of filtering only with the RGB value of the fluid, the accuracy in calculating the coordinates of the adjacent portions can be dramatically increased. In addition, by acquiring pixels of the intermediate color part where two colors are mixed in the image analysis unit, the user is in contact with a weak force that does not allow one surface to be in close contact with the other surface, that is, complete contact and non-contact An intermediate state can be detected.

タッチパネル本体部の全体を柔軟な可撓性を有する材料で形成した場合、タッチパネル本体部の周囲を囲む透明な個体の外骨格部をタッチパネル本体部に密着固定させればよい。外骨格部でタッチパネル本体部の自重による変形を抑制できるので、ユーザからの外力を受けたことによるタッチパネル本体部の変形量を正確に検知できる。
シートの裏面やタッチパネル本体部の他方の面に複数の突起部を設けることで、フレキシブルディスプレイの変形量が小さい場合でも、タッチパネル本体部の一方の面と他方の面とを容易に近接させることができる。換言すると、フレキシブルディスプレイの変形量を抑制でき、フレキシブルディスプレイの塑性変形や破損を防止できる。
突起部の長さを変化させる事により、指等の外力の作用により一方の面が他方の面の方向に移動し始めてから画像解析部が実際に接触状態を検知するまでに指等が移動する距離(ストローク距離)を任意に調整する事が可能である。
複数の突起部各々の長さを異ならせることにすれば、タッチパネル本体部の厚さが一様でない場合でもタッチパネル本体部の全体で上記ストローク距離を一定にできる。
タッチパネル本体部に突起部を挿入するための凹部を設ける事にすれば、動作の精度を高める事ができ、かつシートをタッチパネル本体部に強固に密着固定出来る。また、タッチパネル本体部を地面に垂直に配置した場合でもタッチパネル本体部とシート部が外れる事が無い。
When the entire touch panel body is formed of a soft and flexible material, a transparent solid exoskeleton that surrounds the periphery of the touch panel body may be tightly fixed to the touch panel body. Since the deformation due to the weight of the touch panel body can be suppressed by the exoskeleton, the amount of deformation of the touch panel body due to the external force from the user can be accurately detected.
By providing a plurality of protrusions on the back surface of the sheet or the other surface of the touch panel main body, even if the deformation amount of the flexible display is small, it is possible to easily bring one surface of the touch panel main body close to the other surface. it can. In other words, the deformation amount of the flexible display can be suppressed, and plastic deformation and breakage of the flexible display can be prevented.
By changing the length of the protruding portion, the finger or the like moves from when one surface starts to move in the direction of the other surface due to the action of an external force such as the finger until the image analysis unit actually detects the contact state. The distance (stroke distance) can be adjusted arbitrarily.
If the lengths of the plurality of protrusions are made different, the stroke distance can be made constant throughout the touch panel body even when the thickness of the touch panel body is not uniform.
By providing the touch panel body with a recess for inserting the protrusion, the accuracy of operation can be improved and the sheet can be firmly fixed to the touch panel body. Further, even when the touch panel main body is arranged perpendicular to the ground, the touch panel main body and the sheet are not detached.

本発明のタッチパネルシステムは、タッチパネル本体部内に流体を収容している。特に流体として液体(水など)を収容すれば、フレキシブルディスプレイから発せられる熱を液体で冷やす冷却効果を得られる。特に、突起部を金属製にすれば、金属の熱伝導率の高さを利用して、突起部がヒートシンクとして機能し、水冷効果をより高めることができる。シートの表面を金属の薄板で覆うことにしても高い水冷効果を得られる。また、流体の粘度や量を調整する事により、ユーザがフレキシブルディスプレイに接触した時の柔らかさ、厚さ及びストローク距離を調節できる。
画像解析部は近接箇所における一方の面と他方の面との近接距離も算出できる。画層解析部による解析は流体のRGB値とカメラの撮影画像の画素のRGB値とを比較することで行う。つまり、カメラの撮影画像の画素を液体の色のRGB値でフィルタリングするだけで、近接箇所の座標、近接箇所の形状、近接距離を特定できるためコンピュータの負荷が少なく、低速なICやCPU例えば携帯電話のCPUでも高速に動作する。また、撮影画像の各画素のRGB値を、流体の色のRGB値とどの程度近いかを比較する事で一方の面と他方の面との近接距離を算出し、算出した近接距離を一方の面に外力が作用した際の「接触強度」としてフレキシブルディスプレイの映像に出力することもできる。
流体のRGB値とカメラの撮影画像の画素のRGB値との差が顕著に出るように流体の色又は透明度を調節することができる。これにより、タッチパネル本体部の厚さ(一方の面から他方の面までの距離)が数十センチから数メートル程度の厚みがある場合でも、外力の作用により一方の面を軽く埋没させただけで反応するタッチパネルシステムを得ることができる。
また、流体の色又は透明度を調節することでストローク距離を数ミリから数メートルと任意に調整することもできる。
The touch panel system of the present invention contains a fluid in the touch panel body. In particular, if a liquid (such as water) is accommodated as a fluid, a cooling effect can be obtained by cooling the heat generated from the flexible display with the liquid. In particular, if the protrusion is made of metal, the protrusion functions as a heat sink by utilizing the high thermal conductivity of the metal, and the water cooling effect can be further enhanced. Even if the surface of the sheet is covered with a thin metal plate, a high water cooling effect can be obtained. Further, by adjusting the viscosity and amount of the fluid, the softness, thickness and stroke distance when the user touches the flexible display can be adjusted.
The image analysis unit can also calculate the proximity distance between one surface and the other surface in the proximity location. The analysis by the layer analysis unit is performed by comparing the RGB value of the fluid with the RGB value of the pixel of the image captured by the camera. In other words, it is possible to specify the coordinates of the proximity location, the shape of the proximity location, and the proximity distance simply by filtering the pixels of the captured image of the camera with the RGB value of the liquid color, so the load on the computer is low, and a low-speed IC or CPU such as a mobile phone The phone's CPU operates at high speed. Also, the proximity value between one surface and the other surface is calculated by comparing how close the RGB value of each pixel of the captured image is with the RGB value of the fluid color, and the calculated proximity distance is It can also be output on the image of the flexible display as the “contact strength” when an external force is applied to the surface.
The color or transparency of the fluid can be adjusted so that the difference between the RGB value of the fluid and the RGB value of the pixel of the image captured by the camera is significant. As a result, even when the thickness of the touch panel body (distance from one surface to the other) is about several tens of centimeters to several meters, it is only necessary to bury one surface lightly by the action of external force. A responsive touch panel system can be obtained.
Further, the stroke distance can be arbitrarily adjusted from several millimeters to several meters by adjusting the color or transparency of the fluid.

タッチパネル本体部を軟質塩化ビニール等の透明度を有した柔軟な素材で形成すれば、シート及びフレキシブルディスプレイも屈曲可能な程度に柔らかいため、転倒時や落下時でも安全性が高い。また、タッチパネル本体部を人体の一部を模した形状や円柱形等の任意形状にすれば、従来の板状以外のタッチパネルを得る事ができる。
タッチパネル本体部に第1格納部を設けることにより各種装置等を格納することができる。
空気を充填したクッションの表面にタッチパネル本体部を固定すれば、クッション性に優れたタッチパネルを得られる。
クッションに第2格納部を設けてフレキシブルディスプレイ、シート及びタッチパネル本体部を格納することにしてもよい。
また、クッションにポケットを設けてタッチパネル本体部、シート及びフレキシブルディスプレイを挿入固定することにしてもよい。
流体圧力制御機構として電動ポンプやジェット噴射装置を用いて流体の圧力を変化させることでユーザがフレキシブルディスプレイに接触した際の硬さや触り心地を変化させることができる。
If the touch panel body is made of a flexible material having transparency such as soft vinyl chloride, the sheet and the flexible display are soft enough to bend, so that the safety is high even when falling or falling. In addition, if the touch panel body has an arbitrary shape such as a shape imitating a part of a human body or a cylindrical shape, a touch panel other than a conventional plate shape can be obtained.
Various devices and the like can be stored by providing the first storage unit in the touch panel body.
If the touch panel body is fixed to the surface of the cushion filled with air, a touch panel with excellent cushioning properties can be obtained.
A second display unit may be provided on the cushion to store the flexible display, the seat, and the touch panel body.
Moreover, you may decide to provide a pocket in a cushion and insert and fix a touchscreen main-body part, a sheet | seat, and a flexible display.
By changing the pressure of the fluid using an electric pump or a jet injection device as the fluid pressure control mechanism, it is possible to change the hardness and touch feeling when the user contacts the flexible display.

タッチパネルシステムの本体の構成を示す図(a)及び(b)Figures (a) and (b) showing the configuration of the main body of the touch panel system 近接位置の座標及び近接箇所の形状の判定のアルゴリズムの例Example of algorithm for determining the coordinates of the proximity position and the shape of the proximity location 画像解析部の内部処理フローのブロック図Block diagram of internal processing flow of image analysis unit 撮影画像の画素のRGB値が着色した流体のRGB値とどれだけ近いか比較する事により近接距離を判定するアルゴリズムの例Example of an algorithm that determines the proximity distance by comparing how close the RGB value of the pixel of the captured image is to the RGB value of the colored fluid 着色した流体の透明度や色を変える事によりストローク距離を自由に制御出来る原理の説明(a)及び(b)Explanation of the principle that the stroke distance can be freely controlled by changing the transparency and color of the colored fluid (a) and (b) シートが無い場合のフレキシブルディスプレイの背面凸部によるノイズとなる近接箇所の説明Explanation of proximity parts that cause noise due to the convex part on the back of the flexible display when there is no sheet シートが有る場合のフレキシブルディスプレイの背面凸部によるノイズとなる近接箇所の吸収原理の説明Explanation of the principle of absorption in the vicinity where noise occurs due to the convex part on the back of the flexible display when there is a sheet 突起部付きシートの原理の説明(a)及び(b)Explanation of the principle of the sheet with protrusions (a) and (b) 突起部の長さ調節によるストローク距離調節の原理の説明(a)及び(b)Explanation of the principle of stroke distance adjustment by adjusting the length of the protrusion (a) and (b) シートに突起部挿入固定用の凹部を設けた例Example of providing recesses for inserting and fixing protrusions on the sheet 金属製の突起部を用いて流体による水冷効率を高めた例Example of improving water-cooling efficiency with fluid using metal protrusions 一方の面そのものに突起部を設けた例(a)及び突起部付きシートを流体内側に設けた例(b)Example (a) in which a protrusion is provided on one surface itself and Example (b) in which a sheet with a protrusion is provided inside the fluid 透明な板状の外骨格をタッチパネル本体部の他方の面に密着固定した実施例(a)及び(b)Examples (a) and (b) in which a transparent plate-like exoskeleton is closely fixed to the other surface of the touch panel body クッションを備えるタッチパネル本体部の正面図(a)及びクッションを備えずにタッチパネル本体部を立てた状態を示す正面図(b)Front view of the touch panel body with the cushion (a) and front view showing the state in which the touch panel body is raised without the cushion (b) 様々な形状のタッチパネル本体部の実施例(a)〜(c)Examples (a) to (c) of various shapes of the touch panel body 流体圧力制御機構を設けて流体の圧力制御により接触時のタッチパネルの固さ、クッション性を制御出来る様にした例Example of providing a fluid pressure control mechanism to control the hardness and cushioning properties of the touch panel at the time of contact by controlling the fluid pressure 流体圧力制御機構を設けた場合の内部処理フローのブロック図Block diagram of internal processing flow with fluid pressure control mechanism ジェット噴射装置により近接位置の固さ、クッション性を制御出来る様にした例Example of controlling the hardness and cushioning of the proximity position with a jet injection device タッチパネル本体部に物体を挿入固定出来る格納部を設けた例Example of a storage unit that can insert and fix an object in the touch panel body クッションに物体を格納する格納部とタッチパネル本体部を格納する透明ポケットを設けた実施例An embodiment provided with a storage portion for storing an object in a cushion and a transparent pocket for storing a touch panel body portion

[第1の実施の形態]
以下、本発明のフレキシブルディスプレイ用のタッチパネルシステムの第1の実施の形態を図面を用いて示す。
図1〜図3に示すように、タッチパネルシステム1はタッチパネル本体部V、弾性変形可能なシート17、カメラ50、画像解析部100としてのコンピュータから概略構成される。
タッチパネル本体部Vは一方の面11が可撓性を有する透明な材料からなり、他方の面12が可視光透過性を有する透明な材料からなる中空の袋状の部材である。タッチパネル本体部Vの材料としては例えば軟質塩化ビニール、低密度ポリエチレン等の透明性及び可撓性を有する材料が好ましいが必ずしもこれに限定されない。後述するようにタッチパネル本体部の内部に流体20が収容される。
カメラ50は可視光領域の波長の光の静止画像又は動画像を撮影出来るカメラなら何でも良いが、流体20の色解析が必要であるため、紫外線領域や赤外線領域等の可視光領域以外の光を撮影する暗視装置カメラや赤外線サーモグラフィカメラは不適格である。
[First embodiment]
Hereinafter, a first embodiment of a touch panel system for a flexible display of the present invention will be described with reference to the drawings.
As shown in FIGS. 1 to 3, the touch panel system 1 is generally configured by a touch panel body V, an elastically deformable sheet 17, a camera 50, and a computer as an image analysis unit 100.
The touch panel body V is a hollow bag-like member having one surface 11 made of a transparent material having flexibility and the other surface 12 made of a transparent material having visible light permeability. The material of the touch panel body V is preferably a material having transparency and flexibility such as soft vinyl chloride and low density polyethylene, but is not necessarily limited thereto. As will be described later, the fluid 20 is accommodated inside the touch panel body.
The camera 50 may be any camera that can capture a still image or a moving image of light having a wavelength in the visible light region.However, since color analysis of the fluid 20 is necessary, light other than the visible light region such as the ultraviolet region and the infrared region may be used. Night-vision camera and infrared thermography camera to shoot are not suitable.

画像解析部100はカメラ50の撮影画像の画素の色(RGB値)を解析出来る能力を有しているコンピュータなら何でもよく、通常のパーソナルコンピュータだけでなく、移動携帯端末に搭載されている小型のコンピュータ、ICチップ、ASIC等でも良い。
流体20は水等の液体や粘性を有するジェル状の液体に着色を施した物であり、タッチパネル本体部Vの内部に収容される。流体は空気等の気体であってもよい。
本発明のタッチパネルシステムでは、接触を検知した信号を出力する出力装置として柔軟性を有するフレキシブルディスプレイその他の映像表示装置(有機EL等を利用して製造される物が多い)を想定している。図1のようにフレキシブルディスプレイ200の背面とタッチパネル本体部Vの一方の面11の間にシート17を挟んでいる。
シート17は弾性変形可能なゴム、ウレタン等の素材で出来たシート状或は板状の物体である。シート17は弾性変形可能なためフレキシブルディスプレイ200の背面がどのような形状をしていようともその裏面は平坦な状態でタッチパネル本体部の一方の面11に密着した状態に保たれる。これによりユーザの手UH等がタッチパネル本体部Vに触れた場所の座標や形状を画像解析部100で正確に取得出来る(詳細は後述する)。
一方の面11側にユーザの手UH等を配置し、他方の面12側をカメラ50に向けた状態にする事により、可視光透過性を有する他方の面12は流体20の色で疑似的に着色された状態となり、その状態がカメラ50で撮影される。
流体20はタッチパネル本体部Vの注入口13から内部に注入される。また、注入口13から流体20を外部に排出することでタッチパネル本体部Vを圧縮して収納することができる。
本実施の形態ではタッチパネル本体部Vの形状を平面視四角形状にしているが、他にも例えば平面視円形状、三角形や五角形等の多角形状であってもよく、或いは鉛直方向に沿った断面がかまぼこ型や人体の胴体部等を模した形状であってもよい。
The image analysis unit 100 may be any computer that has the ability to analyze the pixel color (RGB value) of the image captured by the camera 50. The image analysis unit 100 is not only a normal personal computer but also a small mobile device. A computer, IC chip, ASIC, etc. may be used.
The fluid 20 is a product obtained by coloring a liquid such as water or a gel-like liquid having viscosity, and is accommodated in the touch panel body V. The fluid may be a gas such as air.
The touch panel system of the present invention assumes a flexible display or other video display device (many products manufactured using an organic EL or the like) having flexibility as an output device that outputs a signal that detects contact. As shown in FIG. 1, a sheet 17 is sandwiched between the back surface of the flexible display 200 and one surface 11 of the touch panel body V.
The sheet 17 is a sheet-like or plate-like object made of a material such as elastically deformable rubber or urethane. Since the sheet 17 is elastically deformable, no matter what the shape of the back surface of the flexible display 200 is, the back surface is kept flat and in close contact with the one surface 11 of the touch panel body. As a result, the coordinates and shape of the location where the user's hand UH touches the touch panel body V can be accurately acquired by the image analysis unit 100 (details will be described later).
By placing the user's hand UH, etc. on one surface 11 side and the other surface 12 side facing the camera 50, the other surface 12 having visible light transparency is simulated by the color of the fluid 20 And the state is photographed by the camera 50.
The fluid 20 is injected into the inside from the inlet 13 of the touch panel body V. Further, by discharging the fluid 20 from the inlet 13 to the outside, the touch panel body V can be compressed and stored.
In the present embodiment, the shape of the touch panel body V is a rectangular shape in plan view, but may be a circular shape in plan view, a polygonal shape such as a triangle or a pentagon, or a cross section along the vertical direction. The shape may be similar to a kamaboko shape or a torso of a human body.

図1(b)に示すようにユーザの手UHをフレキシブルディスプレイ200の映像表示面に接触させる事によりシート17を介して一方の面11に外力を作用させ、一方の面11と他方の面12とを近接させることで近接箇所14を形成する。なお、一方の面11と他方の面12を密着させてもよい。近接箇所14の流体20はその周囲に移動するため、カメラ50から見た他方の面12の近接箇所14の色は他のエリアのように流体20の色で擬似的に着色されて見える事は無い。本発明ではこの原理を利用してタッチパネル本体部Vに対するユーザの操作を検知する。具体的には図2に示すようにカメラ50で近接箇所14を含む他方の面12を撮影し、画像解析部100がその撮影画像51に基づいて流体20の色で着色されて無いエリア、つまり近接箇所14の画素をRGB解析により割り出す。そして他方の面12における近接箇所14の相対位置のXY座標(近接箇所14の座標)や形状(近接箇所14の形状)を取得し、それを出力値としてフレキシブルディスプレイ200内のポインタ画像201のXY座標や形状に反映させて出力する。   As shown in FIG. 1 (b), by bringing the user's hand UH into contact with the image display surface of the flexible display 200, an external force is applied to one surface 11 via the sheet 17, and one surface 11 and the other surface 12 are applied. And the proximity location 14 is formed. One surface 11 and the other surface 12 may be brought into close contact with each other. Since the fluid 20 at the proximity point 14 moves around it, the color of the proximity point 14 on the other surface 12 viewed from the camera 50 may appear to be pseudo-colored with the color of the fluid 20 as in other areas. No. In the present invention, this principle is used to detect a user operation on the touch panel body V. Specifically, as shown in FIG. 2, the other surface 12 including the proximity portion 14 is photographed by the camera 50, and the image analysis unit 100 is an area not colored with the color of the fluid 20 based on the photographed image 51, that is, The pixels at the close location 14 are determined by RGB analysis. Then, the XY coordinates (coordinates of the proximity part 14) and the shape (shape of the proximity part 14) of the relative position of the proximity part 14 on the other surface 12 are obtained, and the XY of the pointer image 201 in the flexible display 200 is obtained as an output value. Reflects on coordinates and shape and outputs.

画像解析部100の内部処理の具体例を図3に示す。
まずSTEP1にて、画像取込部101でカメラ50で撮影した近接箇所14を含む他方の面12の撮影画像51を取り込む。次のSTEP2にて、流体の色のRGB値保存部102で保存していた流体20の色のRGB値を画像RGB解析部103が取得し(図3の例では流体20の色は赤でありそのRGB値はR:255,G:0,B:0)、そのRGB値を使用して撮影画像51の各画素値を順次フィルタリングしていく。
そして、流体20の色で着色されていないエリアの画素(図3の例ではRGB値がR:255,G:0,B:0以外の画素)を抽出し、その画素の撮影画像51内の座標や他方の面12内の相対座標或は形状を取得し、それらを近接箇所14のエリアの座標や形状データとして画像出力部104に送る。
最後にSTEP3にて、近接箇所14のエリアの座標や形状データを元にフレキシブルディスプレイ200に出力するポインタ画像等を画像出力部104で生成して、その画像をフレキシブルディスプレイ200に出力して終了する。
なお、近接箇所14の位置のみが必要で形状データの取得が不要な場合は、STEP2において撮影画像51内の全ての画素をフィルタリングする必要は無く、流体20の色以外の画素が見つかった段階でその画素の座標を取得して出力する事で大幅な高速化が図れる。また、図3の例では説明上、流体20の色は赤色、RGB値はR:255,G:0,B:0としたが、それ以外の色を流体20の色としてもよい。
A specific example of the internal processing of the image analysis unit 100 is shown in FIG.
First, in STEP 1, a captured image 51 of the other surface 12 including the proximity portion 14 captured by the camera 50 is captured by the image capturing unit 101. In the next STEP2, the image RGB analysis unit 103 acquires the RGB value of the fluid 20 color stored in the RGB color storage unit 102 of the fluid color (in the example of FIG. 3, the color of the fluid 20 is red). The RGB values are R: 255, G: 0, B: 0), and the pixel values of the captured image 51 are sequentially filtered using the RGB values.
Then, a pixel in an area not colored with the color of the fluid 20 (in the example of FIG. 3, an RGB value is a pixel other than R: 255, G: 0, B: 0) is extracted, and the pixel in the captured image 51 is extracted. The coordinates and the relative coordinates or shape in the other surface 12 are acquired, and these are sent to the image output unit 104 as the coordinates and shape data of the area of the proximity location 14.
Finally, in STEP 3, the image output unit 104 generates a pointer image or the like to be output to the flexible display 200 based on the coordinates and shape data of the area of the proximity point 14, and outputs the image to the flexible display 200 to finish. .
If only the position of the proximity part 14 is necessary and it is not necessary to acquire shape data, it is not necessary to filter all the pixels in the captured image 51 in STEP 2, and when a pixel other than the color of the fluid 20 is found. Significant speedup can be achieved by acquiring and outputting the coordinates of the pixel. Further, in the example of FIG. 3, for the sake of explanation, the color of the fluid 20 is red, and the RGB values are R: 255, G: 0, B: 0, but other colors may be used as the fluid 20 color.

一方の面11を可撓性を有し且つ可視光透過性を有する材料で形成した場合、一方の面11側に配置されたシート17が他方の面12側、つまりカメラ50から見ると流体20の色で着色されて見える。この場合、どの程度強く着色されて見えるかはタッチパネル本体部Vの一方の面11と他方の面12の距離に依存する。本発明ではこの原理を利用してユーザの手UHがフレキシブルディスプレイ200とシート17を介してタッチパネル本体部V(一方の面11)にどれだけ強い外力を作用させたかを識別してフレキシブルディスプレイ200に出力する事が出来る。
具体例を図4に示す。ユーザの手UHによりタッチパネル本体部Vに強い外力を加えて一方の面11と他方の面12を密着させている場合は近接箇所14における一方の面11と他方の面12の距離は0であり間の流体20は存在しない。したがって、図4(a)のように近接箇所14はカメラ50から見た撮影画像(カメラ撮影画像52)ではシート17の色(図4の例ではシート17の色は青色(BLUE)を仮定しておりそのRGB値はR:0,G:0,B:255)が近接箇所14を透過してそのまま見える。そして、それに対応した文字列画像202("Strong Push!!")をフレキシブルディスプレイ200に出力させている。
When one surface 11 is formed of a material having flexibility and visible light transmission, the sheet 17 disposed on one surface 11 side is fluid 20 when viewed from the other surface 12, that is, the camera 50. It looks colored with. In this case, how intensely it looks colored depends on the distance between one surface 11 and the other surface 12 of the touch panel body V. In the present invention, this principle is used to identify how strong external force is applied to the touch panel body V (one surface 11) by the user's hand UH via the flexible display 200 and the sheet 17 to the flexible display 200. Can be output.
A specific example is shown in FIG. When a strong external force is applied to the touch panel main body V by the user's hand UH to bring the one surface 11 and the other surface 12 into close contact with each other, the distance between the one surface 11 and the other surface 12 in the proximity portion 14 is zero. There is no fluid 20 in between. Therefore, as shown in FIG. 4 (a), the proximity point 14 is assumed to be the color of the sheet 17 in the captured image (camera captured image 52) viewed from the camera 50 (in the example of FIG. 4, the color of the sheet 17 is blue (BLUE)). The RGB values of R: 0, G: 0, and B: 255 are visible through the adjacent portion 14 as they are. Then, a character string image 202 (“Strong Push !!”) corresponding thereto is output to the flexible display 200.

一方、一方の面11と他方の面12を接触させずに近接させる程度の弱い外力をユーザの手UHによりタッチパネル本体部Vに加えると、図4(b)のようにその近接距離に応じてカメラ50から見た近接箇所14におけるシート17はその流体の色である程度着色されて見える。図4(b)の例では青色(BLUE)より赤みを帯びた紫に近い色でそのRGB値はR:150,G:0,B:150。そして、それに対応した文字列画像203("Weak Push!")をフレキシブルディスプレイ200に出力させている。
また、ユーザの手UHでタッチパネル本体部Vに一切外力を加えない場合は一方の面11と他方の面12は距離が離れているため、図4(c)のようにカメラ50から見たシート17は流体20の色で完全に着色されて見える。図4の例では流体20の色である赤色でそのRGB値はR:255,G:0,B:0)。そして、それに対応した文字列画像204("No Push!")をフレキシブルディスプレイ200に出力させている。
以上のとおり、 一方の面11を可撓性を有し且つ可視光透過性を有する材料で形成した場合、シート17が本来の色からどれだけ流体20の色に近いか、より厳密には近接箇所14のエリアの画素の色のRGB値がどれだけ流体20の色のRGB値に近いかを比較する事により、ユーザがフレキシブルディスプレイ200とシート17を介してタッチパネル本体部Vをどれだけの強さで押したか(一方の面11にどの程度の外力を作用させたか)を類推し、それをフレキシブルディスプレイ200に出力している。
なお、一方の面11を可撓性を有し且つ可視光透過性を持たない材料で形成した場合、一方の面11と他方の面12が密着した状態においてカメラ50から見た近接箇所14の色は一方の面11の色、つまり一方の面11の材料の色そのものになる。これはカメラ50からはシート17が一方の面11に完全に覆われて見えないためである。この場合シート17の色の役割を一方の面11の色がそのまま果たすため上述と全く同様に画像解析部104が撮影画像51の画素のRGB値解析結果に基づいて、近接箇所14の座標と近接箇所14の形状の2つのうち少なくとも1つを算出してフレキシブルディスプレイ200の映像に反映させることができる。
On the other hand, when a weak external force is applied to the touch panel body V by the user's hand UH without bringing the one surface 11 and the other surface 12 into contact with each other, according to the proximity distance as shown in FIG. The sheet 17 at the adjacent portion 14 viewed from the camera 50 appears to be colored to some extent with the color of the fluid. In the example of FIG. 4 (b), the RGB value is R: 150, G: 0, B: 150, which is closer to reddish purple than blue (BLUE). Then, the character string image 203 (“Weak Push!”) Corresponding thereto is output to the flexible display 200.
Also, when no external force is applied to the touch panel main body V with the user's hand UH, the distance between the one surface 11 and the other surface 12 is large, so the sheet viewed from the camera 50 as shown in FIG. 17 appears completely colored with the fluid 20 color. In the example of FIG. 4, the color of fluid 20 is red and its RGB value is R: 255, G: 0, B: 0). Then, a character string image 204 (“No Push!”) Corresponding thereto is output to the flexible display 200.
As described above, when one surface 11 is formed of a material having flexibility and visible light transmission, how close the sheet 17 is to the color of the fluid 20 from the original color, more strictly close By comparing how close the RGB value of the pixel color of the area 14 area is to the RGB value of the fluid 20 color, the user can adjust the strength of the touch panel body V via the flexible display 200 and the sheet 17. It is analogized whether the surface is pressed (how much external force is applied to one surface 11), and is output to the flexible display 200.
When one surface 11 is formed of a material that has flexibility and does not have visible light transmittance, the adjacent portion 14 viewed from the camera 50 in a state where the one surface 11 and the other surface 12 are in close contact with each other. The color is the color of one surface 11, that is, the color of the material of one surface 11 itself. This is because the sheet 17 is completely covered with the one surface 11 and cannot be seen from the camera 50. In this case, since the color of the one surface 11 plays the role of the color of the sheet 17, the image analysis unit 104 and the coordinates of the proximity point 14 and the proximity are based on the RGB value analysis result of the pixel of the captured image 51 in exactly the same manner as described above. At least one of the two shapes of the portion 14 can be calculated and reflected in the video of the flexible display 200.

本発明では他方の面12側から見た一方の面11やシート17(一方の面11を透明な材料で形成した場合)が流体20の色でどの程度着色されているかをカメラ50で見て近接箇所14を検知する方式のため、流体20の色或は透明度を変える事により感度、すなわち指等の外力の作用により一方の面11が他方の面12の方向に移動し始めてから画像解析部が実際に接触状態を検知するまでに指等が移動する距離(ストローク距離)を任意に調整する事が可能である。
具体例を図5に示す。シート17は図5(a)のように透明度が低い流体21、例えば習字で使う墨汁等を用いれば、その透明度の低さ故に一方の面11と他方の面12間の距離が零つまり完全密着時にしか一方の面11或はシート17(一方の面11を透明な材料で形成した場合)がカメラ50からは見えない。したがって、一方の面11と他方の面12を近づけただけではカメラ50の撮影画像から接触を検知出来ない。一方、図5(b)のように透明度が高い流体22、例えば薄い色で着色されたジュースのような液体を用いれば、一方の面11と他方の面12を一定の近さの距離(図5の例ではd2と表記)に近づけただけで、一方の面11或はシート17がその流体22を透過してカメラ50から見える。したがって、近接箇所14が完全に密着してなくても接触を検知出来る。つまり内部の流体21や流体22を自由に入れ替え可能な注入口13を設けて、ユーザ自身が注入口13から内部の流体を適当な透明度や色の流体に入れ替える事により、容易にタッチパネルシステムの感度つまり一方の面11と他方の面12間の距離d2(ストローク距離)を自由に変更或は制御する事が出来る。
In the present invention, the camera 50 shows how much one surface 11 and the sheet 17 (when one surface 11 is formed of a transparent material) viewed from the other surface 12 side is colored with the color of the fluid 20. Since the proximity point 14 is detected, the sensitivity of the fluid 20 by changing the color or transparency of the fluid 20, that is, the image analysis unit after one surface 11 starts moving in the direction of the other surface 12 due to the action of an external force such as a finger It is possible to arbitrarily adjust the distance (stroke distance) that the finger etc. moves before actually detecting the contact state.
A specific example is shown in FIG. If the sheet 17 uses a fluid 21 with low transparency as shown in FIG. 5 (a), such as ink used in calligraphy, the distance between one surface 11 and the other surface 12 is zero, that is, complete contact due to the low transparency. Only one side 11 or sheet 17 (when one side 11 is made of a transparent material) is only visible from the camera 50. Therefore, the contact cannot be detected from the captured image of the camera 50 only by bringing the one surface 11 and the other surface 12 close to each other. On the other hand, when a fluid 22 having a high transparency as shown in FIG. 5 (b), for example, a liquid such as a juice colored in a light color, is used, the distance between the one surface 11 and the other surface 12 is a certain distance (see FIG. The surface 11 or the sheet 17 can pass through the fluid 22 and be seen from the camera 50 just by moving close to d2 in the example of 5). Therefore, the contact can be detected even if the adjacent portion 14 is not completely adhered. In other words, it is possible to easily change the sensitivity of the touch panel system by providing the inlet 13 that can freely replace the internal fluid 21 and the fluid 22 and replacing the internal fluid from the inlet 13 with fluid of appropriate transparency and color. That is, the distance d2 (stroke distance) between the one surface 11 and the other surface 12 can be freely changed or controlled.

また、ストローク距離d2を数十センチから数メートルオーダーの極端に長い距離に設定する事もできる。例えばストローク距離d2を数メートルオーダーに設定したい場合は透明度の高い流体(ほぼ水のような透明度の高い流体)を用いればよく、逆にストローク距離d2を数ミリ以下のオーダーにしたい場合は透明度が非常に低い流体を用いれば良い。以上のように本発明では流体の透明度や色を調整する事により任意の感度や任意の厚さのタッチパネル本体部を得られる。
更に、本発明で用いる流体は着色されていれば良く、例えばジュースやビール等の着色された飲料水を用いる事も可能であり、詳細は後述するがタッチパネル本体部Vの形状を円柱状や人型の形状にも出来る。
なお、タッチパネル本体部Vにシート17やフレキシブルディスプレイ200を密着固定するための手段としては、溶着や接着による固定の他に、透明で可撓性を有する(例えば透明な軟質塩化ビニール等)素材で出来たフレキシブルディスプレイ200とシート17を挿入固定するポケットをタッチパネル本体部Vの一方の面11側に設けてもよい。このポケットを利用してタッチパネル本体部Vにフレキシブルディスプレイ200及びシート17を固定出来るようにしても良い。こうする事でユーザが手持ちのフレキシブルディスプレイを用いて自由に本発明のタッチパネルシステムを構築出来る。更にポケットの内部にフレキシブルディスプレイを挿入固定する際にフレキシブルディスプレイの表面が傷ついたり汚損したりするのを防げる。また、シート17も自由に交換出来るため詳細は後述するがストローク距離を調整するための突起部を設けたシート17と交換する事によりユーザは状況に応じて自由にストローク距離を変更する事が出来る。
なお、本明細書では、一方の面11と他方の面12を密着させるための外力を加える手段としてユーザの手UHで説明しているが、他にも例えば棒状の物体やタッチペン等でもよい。
Further, the stroke distance d2 can be set to an extremely long distance on the order of several tens of centimeters to several meters. For example, if you want to set the stroke distance d2 on the order of several meters, you can use a fluid with high transparency (highly transparent fluid such as water). Conversely, if you want to set the stroke distance d2 on the order of several millimeters or less, the transparency is A very low fluid may be used. As described above, in the present invention, a touch panel body having an arbitrary sensitivity and an arbitrary thickness can be obtained by adjusting the transparency and color of the fluid.
Furthermore, the fluid used in the present invention only needs to be colored. For example, colored drinking water such as juice or beer can be used. Although details will be described later, the shape of the touch panel main body V is cylindrical or human. It can also be shaped.
As a means for closely fixing the sheet 17 and the flexible display 200 to the touch panel main body V, in addition to fixing by welding or adhesion, a transparent and flexible material (for example, transparent soft vinyl chloride) is used. A pocket for inserting and fixing the completed flexible display 200 and the sheet 17 may be provided on the one surface 11 side of the touch panel body V. The flexible display 200 and the sheet 17 may be fixed to the touch panel body V using this pocket. By doing so, the user can freely construct the touch panel system of the present invention using a flexible display on hand. Furthermore, the surface of the flexible display can be prevented from being damaged or soiled when the flexible display is inserted and fixed in the pocket. In addition, since the seat 17 can be freely changed, the details will be described later, but the user can freely change the stroke distance according to the situation by exchanging with the seat 17 provided with a protrusion for adjusting the stroke distance. .
In the present specification, the user's hand UH is described as means for applying an external force for bringing the one surface 11 and the other surface 12 into close contact with each other. However, for example, a rod-like object, a touch pen, or the like may be used.

シート17の役割の詳細について説明する。
本発明では、シート17はその裏面が一方の面11と密着しており、その表面がフレキシブルディスプレイ200の背面と密着した形態で配置される。
シート17はゴム、ウレタン或は軟質PVC等の弾性変形可能な材質から成り、フレキシブルディスプレイ200の背面部品210による凹凸を全て吸収し、一方の面11を平坦に保つことにより近接箇所14が画像解析部100にて正しく取得出来るようにしている。
より具体例としてシート17を用いた場合(図6)と用いない場合(図7)を対比して説明すると、仮に図6のようにシート17を用いずにフレキシブルディスプレイ200の背面に直接、一方の面11を密着固定させてしまうとフレキシブルディスプレイ200に何らかの背面部品210(これには制御用IC、外部との通信デバイス、ヒートシンク、端子、ディップスィッチ、ボタン、バックライトデバイス、給電用の導線、電池等が挙げられる)により凸部が存在する場合、その凸部により流体20が移動してしまうためユーザの手UHが触れていない箇所でも意図しないノイズの近接箇所60が発生してしまう事がある。この場合、ユーザの手UHが触れた事により発生した本来の近接箇所14以外にノイズの近接箇所60も検知してしまうためユーザの手UHが触れた座標を正しく取得できなくなる。
一方、図7のようにシート17を用いた場合は、フレキシブルディスプレイ200の背面部品210による凹凸を全て吸収して一方の面11を平坦に保つことにより図6のようなノイズの近接箇所60が発生しないため近接箇所14が画像解析部100にて正しく取得出来るようになる。
Details of the role of the sheet 17 will be described.
In the present invention, the back surface of the sheet 17 is in close contact with the one surface 11, and the front surface is disposed in close contact with the back surface of the flexible display 200.
The sheet 17 is made of an elastically deformable material such as rubber, urethane, or soft PVC, absorbs all irregularities due to the back part 210 of the flexible display 200, and keeps one surface 11 flat so that the adjacent portion 14 is image-analyzed. Part 100 is able to get it correctly.
As a more specific example, the case where the sheet 17 is used (FIG. 6) and the case where the sheet 17 is not used (FIG. 7) will be described. As shown in FIG. 6, the sheet 17 is not directly used on the back surface of the flexible display 200. If the surface 11 is fixed tightly to the flexible display 200, some rear parts 210 (this includes a control IC, an external communication device, a heat sink, a terminal, a DIP switch, a button, a backlight device, a power supply conductor, If there is a convex part due to the battery etc.), the fluid 20 moves due to the convex part, so that an unintended noise proximity part 60 may occur even where the user's hand UH is not touching. is there. In this case, since the noise proximity portion 60 is also detected in addition to the original proximity location 14 generated by the touch of the user's hand UH, the coordinates touched by the user's hand UH cannot be acquired correctly.
On the other hand, when the sheet 17 is used as shown in FIG. 7, the noise proximity portion 60 as shown in FIG. 6 is obtained by absorbing all the unevenness due to the back part 210 of the flexible display 200 and keeping one surface 11 flat. Since it does not occur, the proximity portion 14 can be correctly acquired by the image analysis unit 100.

なお、図6、図7からも明らかなようにシート17の厚さは少なくともフレキシブルディスプレイ200の背面部品210による凸部を吸収できる厚さにするのが望ましい。図6、図7の例で言えばシート17の厚さはフレキシブルディスプレイの背面の凸部の高さd3以上にする必要が有る。仮にシート17の厚さをd3以下にしてしまうとユーザの手UHで触れていない状態でも常に凸部によりノイズとなる近接箇所60が発生したり或は凸部がある箇所だけストローク距離が短くなってしまう弊害が発生する恐れが有るため注意が必要である。
また、フレキシブルディスプレイ200になんらかの背面部品210が存在しない場合においてもフレキシブルディスプレイ200内部に内包されている薄膜状の部品具体的には有機EL素子に給電するための薄膜状の導線や薄膜状やフィルム状のバックライト等によりミリオーダーの凸部が発生している恐れがあるため。つまりフレキシブルディスプレイの背面が肉眼では平坦に見えてもミリオーダー或はそれ以下のオーダーの凸部存在している場合が有る。したがって、フレキシブルディスプレイ200に背面部品210が無い場合でもシート17を省略せずに最低限それらミリオーダーの凸部を吸収できる厚さ(つまり凸部を含めたフレキシブルディスプレイの厚さ以上の厚さ)にしたシート17を用いる必要が有る。特に一方の面11と他方の面12との距離がミリオーダーのタッチパネル本体部Vは、その距離がセンチオーダーの場合に比して僅かな外部衝撃によって凸部により一方の面11と他方の面12が意図せず密着し易いので注意が必要である。
As is clear from FIGS. 6 and 7, it is desirable that the thickness of the sheet 17 is at least a thickness that can absorb the convex portion due to the back part 210 of the flexible display 200. In the example of FIGS. 6 and 7, the thickness of the sheet 17 needs to be not less than the height d3 of the convex portion on the back surface of the flexible display. If the thickness of the sheet 17 is reduced to d3 or less, even if the sheet is not touched by the user's hand UH, the proximity portion 60 that always causes noise is generated by the convex portion, or the stroke distance is shortened only at the location where the convex portion is present It is necessary to be careful because there is a possibility that harmful effects will occur.
In addition, even when there is no back part 210 in the flexible display 200, a thin-film part included in the flexible display 200, specifically, a thin-film lead, thin-film or film for supplying power to the organic EL element Because there is a possibility that convex parts of the order of millimeters are generated due to the shape of the backlight. In other words, even if the back surface of the flexible display looks flat with the naked eye, there may be convex portions on the order of millimeters or less. Accordingly, even when the flexible display 200 does not have the back part 210, the thickness that can absorb the convex part of the millimeter order at least without omitting the sheet 17 (that is, the thickness more than the thickness of the flexible display including the convex part). It is necessary to use the sheet 17 made. In particular, the touch panel main body V whose distance between the one surface 11 and the other surface 12 is in the order of millimeters is smaller than that when the distance is in the centimeter order. Care must be taken because 12 is unintentionally easy to adhere.

なお、シート17は透明でなく流体20と違う色で着色されている方が望ましい。これは、仮にシート17を透明なビニールやシリコンゴム等で製造してしまうと、図6に示すようにユーザの手UHで触れた事により発生した近接箇所14にフレキシブルディスプレイ背面の回路パターンや部品、その他印刷物がカメラ50から見えてしまうため、これらが流体20の色に近い色だと近接箇所14をRGB解析では上手く検知出来なくなる可能性が有るからである。これを防ぐには図7のようにシート17の色を流体20の色(赤色)の補色或はRGB値が離れた色(青色など)にすれば良い。
最後に一方の面11の色について補足しておくと、本発明では前述のように他方の面12側から見た一方の面11やシート17(一方の面11を透明な材料で形成した場合)が流体20の色でどの程度着色されているかをカメラ50で見て近接箇所14を検知する方式のため、一方の面11は透明でも着色されていてもどちらでも完全に動作する。仮にシート17に透明な素材を用いた場合はその代りに一方の面11を着色する事により補っても良い。なおこの場合一方の面11の色を流体20の色の補色(反対色)やRGB値が離れた色で着色する事によりタッチパネルシステムの精度を高める事が出来る。例えば流体20の色が赤色(そのRGB値はR:255,G:0,B:0)の場合、一方の面11の色は補色として青色(そのRGB値はR:0,G:0,B:255)等のRGB値が赤色と離れた値の色にすればよい。なお、シート17(つまり一方の面11を着色せずに透明な材料で形成した場合)の方を着色する方式ではシート17を交換することによりフレキシブルディスプレイ200の背面の色を室内の照明環境や流体20の色に応じて容易に変更可能なため検知精度の向上が図りやすいというメリットを有する。
It is desirable that the sheet 17 is not transparent and is colored with a color different from the fluid 20. If the sheet 17 is made of transparent vinyl, silicon rubber, or the like, the circuit pattern or component on the back of the flexible display is placed in the proximity 14 generated by touching with the user's hand UH as shown in FIG. This is because other printed materials can be seen from the camera 50, and if these are colors close to the color of the fluid 20, the proximity portion 14 may not be detected well by RGB analysis. In order to prevent this, as shown in FIG. 7, the color of the sheet 17 may be a complementary color of the fluid 20 (red) or a color with a separated RGB value (blue, etc.).
Finally, to supplement the color of one surface 11, in the present invention, as described above, one surface 11 or sheet 17 viewed from the other surface 12 side (when one surface 11 is formed of a transparent material) ) Is detected by the camera 50 to detect how close the color 14 is to the color of the fluid 20, and the proximity portion 14 is detected. If a transparent material is used for the sheet 17, it may be compensated by coloring one surface 11 instead. In this case, the accuracy of the touch panel system can be improved by coloring the color of the one surface 11 with a color complementary to the color of the fluid 20 (opposite color) or a color with a different RGB value. For example, when the color of the fluid 20 is red (its RGB value is R: 255, G: 0, B: 0), the color of one surface 11 is blue as a complementary color (its RGB value is R: 0, G: 0, B: 255) and other RGB values may be different from red. In the method of coloring the sheet 17 (i.e., when the one surface 11 is formed of a transparent material without being colored), the color of the back surface of the flexible display 200 is changed by changing the sheet 17 to the indoor lighting environment or the like. Since it can be easily changed according to the color of the fluid 20, it has an advantage that detection accuracy is easily improved.

[第2の実施の形態]
次に、本発明の第2の実施の形態について説明するが、上記実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
一般に十分なクッション性や心理的に柔らかいと感じる感触を得るには薄い形状のクッションより厚い形状クッションの方が有利である。しかしクッション性を高めるために厚さが厚い形状の或は厚い部分を含む形状のタッチパネル本体部V(厳密には一方の面11と他方の面12との距離が十数センチ、数十センチ以上、或は数メートルオーダーの厚さを有したエリアが存在するタッチパネル本体部V)を作る場合、図8(a)のように一方の面11と他方の面12の距離dが離れすぎているためフレキシブルディスプレイ200を強い力で押下しても、或はフレキシブルディスプレイ200をどれだけ変形させてもカメラ50や画像解析部100で捉えられるだけの近接箇所14(つまりd=0や0近傍の値になる部分)がうまく発生しない可能性が有る。
これを解決する工夫としては図8(b)のようにシート17の裏面に突起部18を設けて、一方の面11と他方の面12を接近させるようにすれば良い。これにより図8(b)のように突起部18の長さだけストローク距離d2を短縮出来る。図8の例では突起部18によりストロークをdからd2に短縮している。ユーザの手UHで強い力を加えたり、或はフレキシブルディスプレイ200を大きく変形させたりする事無しに近接箇所14を発生させる事が出来る。したがって、厚い形状のタッチパネル本体部Vを用いる場合でもフレキシブルディスプレイの塑性変形や破損を防ぐ事が可能になる。なお、突起部18の色はシート17の色と同じく流体20の補色かRGB値が離れている色で着色されている方がタッチパネルの精度は向上する。
[Second Embodiment]
Next, a second embodiment of the present invention will be described. However, portions having the same configuration as those of the above embodiment are denoted by the same reference numerals and description thereof is omitted.
In general, a thick cushion is more advantageous than a thin cushion in order to obtain a sufficient cushioning property and a psychologically soft feel. However, in order to improve cushioning properties, the touch panel body V is thick or includes a thick part (strictly, the distance between one surface 11 and the other surface 12 is several tens of centimeters, several tens of centimeters or more. Or, when making a touch panel body V) in which an area having a thickness of several meters is present, the distance d between one surface 11 and the other surface 12 is too large as shown in FIG. 8 (a). Therefore, even if the flexible display 200 is pressed down with a strong force or how much the flexible display 200 is deformed, the proximity location 14 (that is, d = 0 or a value in the vicinity of 0) that can be captured by the camera 50 or the image analysis unit 100. May not occur well.
As a device for solving this, as shown in FIG. 8 (b), a protrusion 18 may be provided on the back surface of the sheet 17 so that the one surface 11 and the other surface 12 are brought close to each other. As a result, the stroke distance d2 can be shortened by the length of the protrusion 18 as shown in FIG. 8 (b). In the example of FIG. 8, the stroke is shortened from d to d2 by the protrusion 18. The proximity portion 14 can be generated without applying a strong force with the user's hand UH or largely deforming the flexible display 200. Therefore, even when the thick touch panel body V is used, it is possible to prevent plastic deformation and breakage of the flexible display. Note that the accuracy of the touch panel is improved when the color of the protrusion 18 is the same as the color of the sheet 17 and is colored with a complementary color of the fluid 20 or a color with a separated RGB value.

また、図9(a)のようにシート17に異なる長さの突起部18を設ける事により、タッチパネル本体部Vのエリア毎でストローク距離d2を変化させた物を得る事が出来る。更に図9(b)のように一方の面11が湾曲した全体の厚さが一様では無いタッチパネル本体部Vにおいてすべてのエリアのストローク距離d2を同じ値にする事も可能である。このように突起部18の長さを調整する事によりタッチパネル本体部Vの各エリア毎にストローク距離d2を自由に調整出来る。
また、図10に示すように突起部18を固定するための凹部19を備えても良い。この凹部19によりシート17とタッチパネル本体部Vを強固に固定でき、タッチパネル本体部Vを地面に対して垂直にしてもシート17が外れなくなる。また、他の副次的メリットとして詳細は後述するが凹部19の分だけ突起部18と一方の面11が接する面積が増えるため、フレキシブルディスプレイ200の背面から発生した熱を効率的に流体20に伝えて水冷する事が出来る。つまり突起部18が水冷式のヒートシンクとして機能するため、フレキシブルディスプレイ200の安定動作に寄与する。
また、図11に示すように突起部80を例えば熱伝導率の高い金属製にすれば(突起部80に可撓性を持たせたい場合は金属箔を突起部18に巻き付けても良い)、フレキシブルディスプレイ200の背面から発生した熱をより一層効率的に流体20に伝えて水冷する事が出来る。この時水冷効率を更に高めるために突起部80だけでなくシート17全体を熱伝導率の高い材料で作っても良い。
Also, as shown in FIG. 9 (a), by providing the projections 18 having different lengths on the sheet 17, it is possible to obtain a product in which the stroke distance d2 is changed for each area of the touch panel body V. Furthermore, as shown in FIG. 9 (b), the stroke distance d2 of all areas can be set to the same value in the touch panel body V where the entire thickness of the one surface 11 is not uniform. Thus, the stroke distance d2 can be freely adjusted for each area of the touch panel body V by adjusting the length of the protrusion 18.
Further, as shown in FIG. 10, a recess 19 for fixing the protrusion 18 may be provided. The sheet 19 and the touch panel main body V can be firmly fixed by the concave portion 19, and the sheet 17 cannot be detached even if the touch panel main body V is perpendicular to the ground. In addition, as will be described later in detail as another secondary merit, the area where the projection 18 and the one surface 11 are in contact with each other increases by the amount of the recess 19, so that the heat generated from the back of the flexible display 200 is efficiently transferred to the fluid 20. I can tell it and water-cool. That is, since the protrusion 18 functions as a water-cooled heat sink, it contributes to the stable operation of the flexible display 200.
Further, as shown in FIG. 11, if the protrusion 80 is made of, for example, a metal having high thermal conductivity (if the protrusion 80 is desired to have flexibility, a metal foil may be wound around the protrusion 18), The heat generated from the back surface of the flexible display 200 can be transferred to the fluid 20 more efficiently and water-cooled. At this time, in order to further increase the water cooling efficiency, not only the protrusions 80 but the entire sheet 17 may be made of a material having high thermal conductivity.

[第3の実施の形態]
次に、本発明の第3の実施の形態について説明するが、上記実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
本発明のタッチパネルシステムは一方の面11そのものに突起部18を設けても第2の実施の形態と全く同様の効果が得られる。例えば図12(a)に示すように一方の面11そのものに突起部18を設けてその一方の面11の一部である突起部18先端と他方の面12が接近する事により発生する近接箇所14をカメラ50で撮影すればよい。この場合、突起部18は流体20に常時曝されるため、突起部18を耐水性の有る素材例えば軟質、硬質塩化ビニール、ガラス等の素材で作る方が好ましい。なお、図12(a)では一方の面11そのものに突起部18を設けているが他方の面12そのものに突起部18を設けても良い。この場合は突起部18も他方の面12と同じく可視光透過性を有する透明な材料(つまり透明な材料)で作らなくては、その突起部18が障害となり流体20や近接箇所14をカメラ50から撮影できないので注意が必要で有る。また、前述のフレキシブルディスプレイ200の水冷効率についても一方の面11そのものに突起部18を設けた方が、突起部18とフレキシブルディスプレイ200背面の距離を近く出来るため、他方の面12そのものに突起部18を設ける場合に比して遥かに水冷効率が高い。
[Third Embodiment]
Next, a third embodiment of the present invention will be described. The same reference numerals are given to portions having the same configuration as the above embodiment, and the description thereof is omitted.
In the touch panel system of the present invention, the same effect as that of the second embodiment can be obtained even when the protrusion 18 is provided on the one surface 11 itself. For example, as shown in FIG. 12 (a), a projecting portion 18 is provided on one surface 11 itself, and a proximate portion that occurs when the tip of the projecting portion 18 that is a part of the one surface 11 approaches the other surface 12. You can shoot 14 with the camera 50. In this case, since the protrusion 18 is constantly exposed to the fluid 20, it is preferable to make the protrusion 18 from a water-resistant material such as soft, hard vinyl chloride, or glass. In FIG. 12A, the protrusion 18 is provided on one surface 11 itself, but the protrusion 18 may be provided on the other surface 12 itself. In this case, the projection 18 must also be made of a transparent material having a visible light transmission property (that is, a transparent material) like the other surface 12. It is necessary to be careful because it cannot be taken from. In addition, regarding the water cooling efficiency of the flexible display 200 described above, if the projection 18 is provided on one surface 11 itself, the distance between the projection 18 and the back of the flexible display 200 can be reduced, so that the projection on the other surface 12 itself. Water cooling efficiency is much higher than when 18 is provided.

[第4の実施の形態]
次に、本発明の第4の実施の形態について説明するが、上記各実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
図12(b)に示すように、シート17はタッチパネル本体部Vの内部側に設けても良い。その場合はシート17の表面が一方の面11と密着しており、且つそのシート17の裏面に複数の空間側に向いた突起部18を備えている。また、一方の面11の表面がフレキシブルディスプレイ200の背面と密着している。
この構成でも第2の実施の形態或は第3の実施の形態と全く同様の効果が得られる。また、フレキシブルディスプレイ200の背面部品210による凸部は可撓性の有する一方の面11を介してシート17の弾性変形により吸収されるため、凸部による余分なノイズとなる近接箇所60が発生する事を防ぐことができる。この場合も突起部18は流体20に常時曝されるため、突起部18を耐水性の有る素材例えば軟質、硬質塩化ビニール、ガラス等の素材で作る方が好ましい。
[Fourth Embodiment]
Next, a fourth embodiment of the present invention will be described, but the same reference numerals are given to portions having the same configurations as those of the above embodiments, and the description thereof is omitted.
As shown in FIG. 12 (b), the sheet 17 may be provided inside the touch panel body V. In that case, the surface of the sheet 17 is in close contact with the one surface 11, and a plurality of protrusions 18 facing the space are provided on the back surface of the sheet 17. Further, the surface of one surface 11 is in close contact with the back surface of the flexible display 200.
With this configuration, the same effects as those of the second or third embodiment can be obtained. In addition, since the convex portion due to the back part 210 of the flexible display 200 is absorbed by the elastic deformation of the sheet 17 through the one flexible surface 11, the proximity portion 60 that causes extra noise due to the convex portion is generated. You can prevent things. Also in this case, since the protrusion 18 is constantly exposed to the fluid 20, it is preferable to make the protrusion 18 from a water-resistant material such as soft, hard vinyl chloride, or glass.

[第5の実施の形態]
次に、本発明の第5の実施の形態について説明するが、上記実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
図13(b)に示すように、タッチパネル本体部Vの他方の面12に可視光透過性を有する透明な材質で出来た固体の板状の外骨格部15を密着固定させても良い。他方の面12の材質が可撓性を有する場合、ユーザの手UHがフレキシブルディスプレイ200を押下すると、図13(a)のように外力が流体20を伝わることにより他方の面12も撓ませてしまう。これにより一方の面11と他方の面12の間の流体20がうまく排出されず、近接箇所14の検知が正常に行われない可能性が有る。図13(b)のように板状の外骨格部15を他方の面12に密着固定させると、外骨格部15の働きによりユーザの手UHが一方の面11を押下した際に他方の面12に相応の反力が発生し、一方の面11と他方の面12の流体20がうまく排出される。これにより近接箇所14の検知が正常に行われ、検知精度が上がる。また、外骨格部15にテーブル脚部40を設けて、外骨格部15をテーブルの天板として機能させる事により、テーブル状のタッチパネルシステムが得られる。
外骨格部15の素材としてはカメラ50の撮影を妨げない透明な固体の材質の素材なら何でも良く、ガラスやアクリル、ポリカーボネイト等が挙げられる。
[Fifth Embodiment]
Next, a fifth embodiment of the present invention will be described. The same reference numerals are given to portions having the same configuration as the above embodiment, and the description thereof is omitted.
As shown in FIG. 13 (b), a solid plate-like exoskeleton 15 made of a transparent material having visible light permeability may be tightly fixed to the other surface 12 of the touch panel body V. When the material of the other surface 12 is flexible, when the user's hand UH depresses the flexible display 200, the other surface 12 is also deflected by the external force transmitted through the fluid 20 as shown in FIG. End up. Accordingly, there is a possibility that the fluid 20 between the one surface 11 and the other surface 12 is not discharged well, and the proximity portion 14 is not normally detected. When the plate-like exoskeleton 15 is tightly fixed to the other surface 12 as shown in FIG. 13 (b), when the user's hand UH presses the one surface 11 due to the action of the exoskeleton 15, the other surface The reaction force corresponding to 12 is generated, and the fluid 20 on one surface 11 and the other surface 12 is discharged well. As a result, the proximity portion 14 is normally detected, and the detection accuracy is improved. Further, a table-like touch panel system can be obtained by providing table legs 40 in the exoskeleton 15 and causing the exoskeleton 15 to function as a table top.
The material of the exoskeleton 15 may be any material that is a transparent solid material that does not interfere with the shooting of the camera 50, and examples thereof include glass, acrylic, and polycarbonate.

[第6の実施の形態]
次に、本発明の第6の実施の形態について説明するが、上記各実施の形態と同一の構成
になる箇所については同一の符号を付してその説明を省略する。
図14(a)に示すように、本実施の形態のタッチパネルは、内部の気密空間32に空気が充填されている透明なクッション30を備える点に特徴を有する。透明なクッション30を構成する素材として遊具の浮き輪等で用いられる軟質塩化ビニールやポリエチレン等の透明柔軟な素材33が挙げられる。
タッチパネル本体部Vはクッション30の側面に取り付けられることで鉛直方向に広がる。本実施の形態のタッチパネルシステムによれば、クッション30の内部に充填されている空気の膨張圧力が働くことにより、図14(b)に示すように流体20が下方に移動することによってタッチパネル本体部Vの下方が撓むことを防止できる。したがって、タッチパネル本体部Vが地面に対して垂直を含むどのような角度であってもタッチパネルシステムは正常に動作する。また、図14(a)に示すようにクッション30にカメラ50を固定するための透明な素材で出来たカメラ固定用ポケット34を設けても良い。カメラ固定用ポケット34を透明にする理由は、カメラ固定用ポケット34を用いずにクッション30の外部から他方の面12を撮影する際に同ポケットの素材が撮影の妨げにならないようにするためである。
また、クッション30はシート17と同じく可撓性或は柔軟性を有するため、シート17の位置にシート17の代わりにクッション30を配置する事により、クッション30をシート17の代わりとして用いても良い。ただし、シート17の代わりとする場合のクッション30の表面の素材は流体20の色の補色か流体20の色とRGB値が離れた色に着色する事がタッチパネルの精度上望ましい。
なお、タッチパネル本体部Vの素材として可撓性が低いものを使用することで流体20の重さによる下方への撓みを防止してタッチパネル本体部Vの垂直配置を実現しても良く、或いはタッチパネル本体部Vの四隅に紐を取り付けてその紐を引っ張るテンションにより垂直配置を実現しても良い。
[Sixth Embodiment]
Next, a sixth embodiment of the present invention will be described, but the same reference numerals are given to portions having the same configurations as those of the above embodiments, and the description thereof is omitted.
As shown in FIG. 14 (a), the touch panel of the present embodiment is characterized in that it includes a transparent cushion 30 in which air is filled in an airtight space 32 inside. Examples of a material constituting the transparent cushion 30 include a transparent and flexible material 33 such as soft vinyl chloride or polyethylene used in a floating ring of a playground equipment.
The touch panel body V is attached to the side surface of the cushion 30 and spreads in the vertical direction. According to the touch panel system of the present embodiment, the fluid 20 moves downward as shown in FIG. It is possible to prevent the lower part of V from bending. Therefore, the touch panel system operates normally regardless of the angle at which the touch panel body V is perpendicular to the ground. Further, as shown in FIG. 14 (a), a camera fixing pocket 34 made of a transparent material for fixing the camera 50 to the cushion 30 may be provided. The reason for making the camera fixing pocket 34 transparent is to prevent the material in the pocket from interfering with the shooting when shooting the other surface 12 from the outside of the cushion 30 without using the camera fixing pocket 34. is there.
Further, since the cushion 30 is flexible or flexible like the seat 17, the cushion 30 may be used in place of the seat 17 by arranging the cushion 30 in place of the seat 17 at the position of the seat 17. . However, it is desirable in terms of the accuracy of the touch panel that the material of the surface of the cushion 30 in the case of replacing the seat 17 is colored in a color complementary to the color of the fluid 20 or a color separated from the color of the fluid 20 and RGB values.
In addition, by using a material with low flexibility as the material of the touch panel main body V, the vertical arrangement of the touch panel main body V may be realized by preventing downward bending due to the weight of the fluid 20, or the touch panel You may implement | achieve vertical arrangement | positioning with the tension | tensile_strength which attaches a string to the four corners of the main-body part V, and pulls the string.

[第7の実施の形態]
次に、本発明の第7の実施の形態について説明するが、上記各実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
図15(c)に示すように、本実施の形態のタッチパネルシステムは、タッチパネル本体部Vが人体の一部、すなわち頭部と胴体部を模した形状をしている。
可撓性或は柔軟性を有した人型形状のタッチパネル本体部Vにすることで、ユーザの手UHで人型形状のタッチパネル本体部Vに接触した際の近接箇所14の座標や形状を取得し、それを反映した映像をフレキシブルディスプレイ200に出力できる。このほかにも図15(b)に示すようにタッチパネル本体部Vを円柱形状としも良く、これを用いる事で実際に相手の動画が映りそれをインタラクティブに殴打出来る拳闘(ボクシング)のサンドバッグ等が作れる。なお、本発明と直接関係無いが浮き輪や遊具用プールの素材として使用される軟質塩化ビニールを既知の高周波電流を用いたウェルダ技術(通称、単に高周波ウェルダ)等の手段で溶着してタッチパネル本体部Vを形成すれば、人体や円柱形状だけでない様々な形状のタッチパネル本体部Vを形成できる。なお、図15(b)及び(c)中の符号35は自立時に重心を安定させるための重石である。
[Seventh Embodiment]
Next, a seventh embodiment of the present invention will be described, but the same reference numerals are given to portions having the same configurations as those of the above embodiments, and the description thereof is omitted.
As shown in FIG. 15 (c), in the touch panel system of the present embodiment, the touch panel body V has a shape imitating a part of the human body, that is, the head and the body.
By making the humanoid touch panel body V flexible or flexible, the coordinates and shape of the proximity location 14 when the user touches the human touch panel body V with the hand UH are obtained. Then, an image reflecting this can be output to the flexible display 200. In addition to this, as shown in Fig. 15 (b), the touch panel body V may be a cylindrical shape, and by using this, the opponent's video can be reflected and it can be played interactively, such as a boxing sandbag. Can be made. Although not directly related to the present invention, the touch panel body is formed by welding soft vinyl chloride used as a material for a floating ring or a pool for playground equipment by means of a welder technique using a known high-frequency current (commonly simply a high-frequency welder). If the portion V is formed, it is possible to form the touch panel body V having various shapes other than the human body and the columnar shape. Note that reference numeral 35 in FIGS. 15 (b) and 15 (c) is a weight for stabilizing the center of gravity at the time of independence.

[第8の実施の形態]
次に、本発明の第8の実施の形態について説明するが、上記各実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
図16に示すように、本実施の形態のタッチパネルシステムは流体20からタッチパネル本体部Vに作用する圧力を制御するための流体圧力制御機構38を備える点と、流体圧力制御機構38が近接箇所14の座標、近接箇所14の形状及び近接距離の3つのうち少なくとも1つに基づいて圧力を変化させる点に特徴を有する。
具体的には、タッチパネル本体部Vの流体20の圧力を変化させるための電動ポンプ等の流体圧力制御機構38をタッチパネル本体部Vに設ける。そして、画像解析部100によるカメラ50の撮影画像の解析結果を流体圧力制御機構38にフィードバックして流体の圧力を変化させる事により、ユーザの手UHが一方の面11に接触した際の固さ或はクッション性をリアルタイムに調整する事が出来る。例えば、画像解析部100が算出した近接箇所14の縦横座標(図16ではXY座標で表現)やユーザの手UHが一方の面11に埋没した深さ(近接距離、図16ではZ座標で表現)等の位置座標情報を流体圧力制御機構38の駆動制御に反映させるようにできる。これにより触位置の座標によって一方の面11及びフレキシブルディスプレイ200の固さ或はクッション性を変化させる事が可能になる。
[Eighth Embodiment]
Next, an eighth embodiment of the present invention will be described. However, portions having the same configurations as those of the above-described embodiments are denoted by the same reference numerals and description thereof is omitted.
As shown in FIG. 16, the touch panel system of the present embodiment includes a fluid pressure control mechanism 38 for controlling the pressure acting on the touch panel main body V from the fluid 20, and the fluid pressure control mechanism 38 is located in the vicinity 14. This is characterized in that the pressure is changed based on at least one of the following coordinates, the shape of the proximity location 14, and the proximity distance.
Specifically, a fluid pressure control mechanism 38 such as an electric pump for changing the pressure of the fluid 20 in the touch panel body V is provided in the touch panel body V. Then, by feeding back the analysis result of the image taken by the camera 50 by the image analysis unit 100 to the fluid pressure control mechanism 38 and changing the fluid pressure, the hardness when the user's hand UH contacts one surface 11 is changed. Or cushioning can be adjusted in real time. For example, the vertical and horizontal coordinates of the proximity point 14 calculated by the image analysis unit 100 (expressed in XY coordinates in FIG. 16) and the depth at which the user's hand UH is buried in one surface 11 (proximity distance, expressed in Z coordinates in FIG. 16) ) And the like can be reflected in the drive control of the fluid pressure control mechanism 38. This makes it possible to change the hardness or cushioning property of the one surface 11 and the flexible display 200 according to the coordinates of the touch position.

このときの画像解析部100内の具体的な処理フローを図17に示す。
まず最初のSTEP1にて、画像取込部101でカメラ50で撮影した近接箇所14を含む他方の面12の撮影画像を取り込む。
次のSTEP2にて、画像RGB解析部103で流体の色のRGB値保存部102に保存されていた流体20の色のRGB値を取得し(図17の例では流体20の色は赤でありそのRGB値はR:255,G:0,B:0)、そのRGB値を以て撮影画像の各画素値を順次フィルタリングしていき、流体20の色で着色されていないエリアの画素(図17の例ではRGB値がR:255,G:0,B:0以外の画素)を抽出する。そして、撮影画像内のその画素の座標や他方の面12内の相対座標或は形状を取得し、それらを近接箇所14のエリアの座標や形状データとして画像出力部104に送る。
最後にSTEP3にて、画像出力部104で近接箇所14のエリアの座標や形状データを元にポインタ画像等を生成して、その画像をフレキシブルディスプレイ200に出力する。この時同時にSTEP4にて、流体圧力制御部105(流体圧力制御機構38の一部)で近接箇所14のエリアの座標や形状データに応じた制御信号を電動ポンプ等の流体圧力制御機構38へ出力する事によりタッチパネル本体部Vの内部流体20の流体の圧力を変化させて終了する。
A specific processing flow in the image analysis unit 100 at this time is shown in FIG.
First, in the first STEP 1, a captured image of the other surface 12 including the proximity portion 14 captured by the camera 50 is captured by the image capturing unit 101.
In the next STEP2, the RGB value of the fluid 20 stored in the RGB value storage unit 102 of the fluid color is acquired by the image RGB analysis unit 103 (in the example of FIG. 17, the color of the fluid 20 is red). The RGB values are R: 255, G: 0, B: 0), each pixel value of the captured image is sequentially filtered with the RGB values, and the pixels in the area not colored with the fluid 20 color (in FIG. 17) In the example, pixels whose RGB values are other than R: 255, G: 0, B: 0) are extracted. Then, the coordinates of the pixel in the photographed image and the relative coordinates or shape in the other surface 12 are acquired, and these are sent to the image output unit 104 as the coordinates and shape data of the area of the proximity location 14.
Finally, in STEP 3, the image output unit 104 generates a pointer image or the like based on the coordinates and shape data of the area of the adjacent portion 14 and outputs the image to the flexible display 200. At the same time, at STEP4, the fluid pressure control unit 105 (a part of the fluid pressure control mechanism 38) outputs a control signal corresponding to the coordinates and shape data of the area of the proximity 14 to the fluid pressure control mechanism 38 such as an electric pump. As a result, the pressure of the fluid of the internal fluid 20 of the touch panel body V is changed, and the process ends.

なお、流体圧力制御機構38として電動ポンプを用いて流体20の圧力をリアルタイムで変化させる事により、一方の面11の固さやクッション性をリアルタイムで制御出来るようにしても良い。
或いは図18に示すようにタッチパネル本体部Vの内部の任意の方向に水流を吐き出す事が出来るホース等のジェット噴射装置39を流体圧力制御機構38として用いてもよい。この場合、近接箇所14の方向に直接、水流を噴射する事により、近接箇所14の近傍の流体20の圧力だけを限定して変化させ、省エネ化を図っても良い。なお、ジェット噴射装置39の噴流を近接箇所14方向へ向けるための具体的な制御方法としてはモータ等の周知のサーボ機構等を用いればよい。噴流の噴出方向は近接箇所14のエリアの座標を用いて算出すれば良い。
The fluid pressure control mechanism 38 may use an electric pump to change the pressure of the fluid 20 in real time so that the hardness and cushioning property of the one surface 11 can be controlled in real time.
Alternatively, as shown in FIG. 18, a jet injection device 39 such as a hose that can discharge a water flow in an arbitrary direction inside the touch panel main body V may be used as the fluid pressure control mechanism 38. In this case, it is also possible to save energy by limiting the pressure of the fluid 20 in the vicinity of the proximity location 14 by injecting a water flow directly in the direction of the proximity location 14. A specific control method for directing the jet flow of the jet injection device 39 in the direction of the adjacent portion 14 may be a known servo mechanism such as a motor. The jet direction of the jet may be calculated using the coordinates of the area of the adjacent location 14.

[第9の実施の形態]
次に、本発明の第9の実施の形態について説明するが、上記各実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
図19に示すように、本実施の形態のタッチパネルシステムはタッチパネル本体部Vの底面にパソコン等の物体82を格納するための第1格納部81を設けて、そこに物体82を挿入固定している。こうする事により物体82を本発明タッチパネルで覆う事が可能になる。副次的なメリットとしては物体82が自立可能な物体の場合タッチパネル本体部Vの内部の格納部81にそれを格納する事によりタッチパネル本体部Vの自立の安定性が増す。また、物体82として放熱が必要なパソコンや家電機器を選択した場合、それらの物体を格納部81に挿入固定する事により流体20により水冷する事が可能になる。なお、図19の例では第1格納部81をタッチパネル本体部Vの底面に設けたが必ずしも底面に設ける必要は無い。例えば第1格納部81をタッチパネル本体部Vの側面に設けて、壁の突起等を第1格納部81に挿入固定すればタッチパネル本体部Vを壁に容易に固定出来る。
[Ninth Embodiment]
Next, a ninth embodiment of the present invention will be described. The same reference numerals are given to portions having the same configurations as those of the above embodiments, and the description thereof will be omitted.
As shown in FIG. 19, the touch panel system of the present embodiment is provided with a first storage part 81 for storing an object 82 such as a personal computer on the bottom surface of the touch panel body V, and the object 82 is inserted and fixed therein. Yes. In this way, the object 82 can be covered with the touch panel of the present invention. As a secondary merit, when the object 82 is a self-supporting object, the stability of the self-supporting of the touch panel body V is increased by storing it in the storage part 81 inside the touch panel body V. Further, when a personal computer or home appliance that requires heat dissipation is selected as the object 82, the object 20 can be water-cooled by the fluid 20 by inserting and fixing the object in the storage unit 81. In the example of FIG. 19, the first storage unit 81 is provided on the bottom surface of the touch panel main body V, but it is not necessarily provided on the bottom surface. For example, the touch panel body V can be easily fixed to the wall by providing the first storage 81 on the side surface of the touch panel body V and inserting and fixing wall projections or the like in the first storage 81.

[第10の実施の形態]
次に、本発明の第10の実施の形態について説明するが、上記各実施の形態と同一の構成になる箇所については同一の符号を付してその説明を省略する。
図20に示すように、本実施の形態のタッチパネルシステムは第4の実施の形態のタッチパネル本体部Vの側面に付けられたクッション30の底面にパソコン等の物体82を格納するための第2格納部83を設けて、そこに物体82を挿入固定している。こうする事により物体82を本発明タッチパネルで覆う事が可能になる。副次的なメリットとしては物体82が自立可能な物体の場合、クッション30の内部の格納部81に物体82を格納する事によりタッチパネル本体部Vの自立の安定性が増す。
なお、タッチパネル本体部Vとシート17とフレキシブルディスプレイ200を一緒に挿入固定するための透明で可撓性を有する素材出来たポケット84をクッション30に設けても良い。こうすることによりタッチパネル本体部Vやシート17或はフレキシブルディスプレイ200の脱着交換が容易になり、ユーザの状況に応じて自由な画面サイズのフレキシブルディスプレイを使い分ける事が出来る。更にシート17を突起部有りと無しの物に容易に交換出来、それによりユーザはストローク距離を状況に応じて適した物に調整出来る。また、副次的メリットとして、フレキシブルディスプレイ200をポケット84の内部に挿入する図20のようにユーザの手UHが直接触れる事が無くなる。これはフレキシブルディスプレイ200の表面の保護に繋がる。また、ポケット84の素材を厚くする事によりその保護性能を増す事が出来るため、ユーザが手でタッチパネルを押下する場合だけでなく拳で殴打することも出来る。そのため例えばフレキシブルディスプレイにボクシング選手の動画映像を写してそれをユーザの拳や足でインタラクティブに殴打出来る新しいタイプのサンドバック等にも応用が出来る。
[Tenth embodiment]
Next, a tenth embodiment of the present invention will be described, but the same reference numerals are given to portions having the same configurations as those of the above embodiments, and the description thereof will be omitted.
As shown in FIG. 20, the touch panel system of the present embodiment is a second storage for storing an object 82 such as a personal computer on the bottom surface of the cushion 30 attached to the side surface of the touch panel main body V of the fourth embodiment. A portion 83 is provided, and the object 82 is inserted and fixed therein. In this way, the object 82 can be covered with the touch panel of the present invention. As a secondary merit, when the object 82 is a self-supporting object, the stability of the self-supporting of the touch panel body V is increased by storing the object 82 in the storage part 81 inside the cushion 30.
A pocket 84 made of a transparent and flexible material for inserting and fixing the touch panel body V, the sheet 17, and the flexible display 200 together may be provided in the cushion 30. In this way, the touch panel body V, the sheet 17 or the flexible display 200 can be easily attached and detached, and a flexible display having a free screen size can be used depending on the user's situation. Further, the sheet 17 can be easily exchanged with and without the protrusions, so that the user can adjust the stroke distance to a suitable one according to the situation. Further, as a secondary merit, the user's hand UH is not directly touched as shown in FIG. 20 in which the flexible display 200 is inserted into the pocket 84. This leads to protection of the surface of the flexible display 200. Further, since the protection performance can be increased by increasing the thickness of the material of the pocket 84, the user can not only press the touch panel with his hand but can also strike with a fist. For this reason, for example, it can be applied to a new type of sandback that can display a boxing player's video on a flexible display and interactively strike it with a user's fist or foot.

本発明は、装置構成が簡易で周囲の温度の影響を受けにくく、変形可能であり、ユーザがフレキシブルディスプレイに直接触れることができるフレキシブルディスプレイ用のタッチパネルシステムに関するものであり、産業上の利用可能性を有する。   The present invention relates to a touch panel system for a flexible display that has a simple device configuration, is not easily affected by ambient temperature, can be deformed, and can be directly touched by a user, and is industrially applicable. Have

V タッチパネル本体部
UH ユーザの手
d:一方の面と他方の面距離(非接触時)
d2:接触検知可能距離
d3:背面の凸部の高さ(フレキシブルディスプレイ)
1 タッチパネルシステム
11 一方の面(透明)
12 他方の面(透明)
13 注入口
14 近接箇所
15 外骨格部(透明)
17 シート
18 突起部
19 凹部
20 流体
21 流体(透明度低い)
22 流体(透明度高い)
30 クッション
32 内部の気密空間(空気充填)
33 透明柔軟な素材(クッション構成素材)
34 カメラ固定用ポケット(透明)
35 重石(自立時の重心安定用)
38 流体圧力制御機構(電動ポンプ)
39 流体圧力制御機構(ジェット噴射装置)
40 テーブル脚部
41 地面
50 カメラ
51 カメラ撮影画像(画像解析時イメージ)
52 カメラ撮影画像(他方の面から見たイメージ)
60 ノイズの近接箇所
80 突起部(金属製)
81 格納部(物体格納用)
82 物体
83 格納部(物体格納用)
84 ポケット(透明で柔軟)
100 コンピュータ(画像解析部)
101 画像取込部
102 流体の色のRGB値保存部
103 画像RGB解析部(接触個所特定部)
104 画像出力部
105 流体圧力制御部
200 フレキシブルディスプレイ
201 ポインタ画像
202 文字列画像(Strong Push)
203 文字列画像(Weak Push)
204 文字列画像(No Push)
210 背面部品(フレキシブルディスプレイ)
V Touch panel body
UH User's Hand
d: Distance between one surface and the other (when not in contact)
d2: Touch detectable distance
d3: Height of convex part on the back (flexible display)
1 Touch panel system
11 One side (transparent)
12 The other side (transparent)
13 Inlet
14 Proximity
15 Exoskeleton (transparent)
17 seats
18 Protrusion
19 Recess
20 fluid
21 Fluid (low transparency)
22 Fluid (High transparency)
30 cushion
32 Internal airtight space (air filling)
33 Transparent and flexible material (cushion component material)
34 Camera fixing pocket (transparent)
35 Heavy stone (for stabilization of the center of gravity when standing independently)
38 Fluid pressure control mechanism (electric pump)
39 Fluid pressure control mechanism (jet injection device)
40 Table legs
41 ground
50 cameras
51 Camera image (image analysis image)
52 Camera image (viewed from the other side)
60 Locations close to noise
80 Protrusion (metal)
81 Storage unit (for storing object)
82 objects
83 Storage (for storing objects)
84 pockets (transparent and flexible)
100 Computer (Image Analysis Department)
101 Image capture unit
102 RGB value storage for fluid color
103 Image RGB analysis section (contact location identification section)
104 Image output section
105 Fluid pressure controller
200 Flexible display
201 Pointer image
202 String image (Strong Push)
203 String image (Weak Push)
204 String image (No Push)
210 Rear parts (flexible display)

Claims (14)

一方の面が可撓性を有する材料から成り、他方の面が可視光透過性を有する材料から成り、前記一方の面と前記他方の面とに挟まれた空間内に着色された流体を収容する袋状のタッチパネル本体部と、
弾性変形可能なシートと、
可視光領域の波長の光を撮影可能であり前記他方の面を撮影するカメラと、
前記カメラの撮影画像の画素のRGB値を解析する画像解析部とを備えており、
フレキシブルディスプレイと一体に使用されるものであり、
前記シートはその裏面が前記一方の面と密着しており、その表面が前記フレキシブルディスプレイの背面と密着しており、
前記フレキシブルディスプレイの変形により発生する外力を受けて前記一方の面と前記他方の面とが近接し、当該近接箇所から前記流体が移動することにより生じる前記他方の面の色の変化を前記カメラが撮影し、
前記画像解析部は前記撮影画像の画素のRGB値解析結果に基づいて、前記他方の面上の前記近接箇所の座標と前記近接箇所の形状の2つのうち少なくとも1つを算出して前記フレキシブルディスプレイの映像に反映させることを特徴とするフレキシブルディスプレイ用のタッチパネルシステム。
One surface is made of a flexible material and the other surface is made of a material having visible light permeability, and contains a colored fluid in a space sandwiched between the one surface and the other surface. A bag-shaped touch panel main body,
An elastically deformable sheet;
A camera capable of photographing light of a wavelength in the visible light region and photographing the other surface;
An image analysis unit that analyzes RGB values of pixels of the image captured by the camera;
It is used together with a flexible display,
The back surface of the sheet is in close contact with the one surface, and the surface is in close contact with the back surface of the flexible display,
The camera receives the external force generated by the deformation of the flexible display, the one surface and the other surface come close to each other, and the camera changes the color of the other surface caused by the fluid moving from the proximity location. Shoot and
The image analysis unit calculates at least one of the coordinates of the proximity location on the other surface and the shape of the proximity location based on the RGB value analysis result of the pixel of the captured image, and the flexible display Touch panel system for flexible displays, characterized in that it is reflected in the video.
前記シートの厚さが、前記フレキシブルディスプレイの背面の凸部の高さよりも大きいことを特徴とする請求項1に記載のタッチパネルシステム。
2. The touch panel system according to claim 1, wherein a thickness of the sheet is larger than a height of a convex portion on a back surface of the flexible display.
前記一方の面が可視光透過性を有する材料で形成され、且つ前記シートの裏面が単色に着色されていることを特徴とする請求項1又は2に記載のタッチパネルシステム。
3. The touch panel system according to claim 1, wherein the one surface is formed of a material having visible light permeability, and the back surface of the sheet is colored in a single color.
前記シートの裏面に複数の突起部を備えることを特徴とする請求項1〜3のいずれか一項に記載のタッチパネルシステム。
The touch panel system according to claim 1, further comprising a plurality of protrusions on a back surface of the sheet.
前記一方の面或は他方の面のいずれかの面から前記空間側に向いた複数の突起部を備えることを特徴とする請求項1〜3のいずれか一項に記載のタッチパネルシステム。
4. The touch panel system according to claim 1, further comprising a plurality of protrusions facing from one of the one surface or the other surface toward the space. 5.
複数の前記突起部各々の長さが異なることを特徴とする請求項4又は5に記載のタッチパネルシステム。
The touch panel system of claim 4 or 5 the length of the plurality of protrusions each are different.
前記突起部が金属製であり、前記フレキシブルディスプレイから発せられる熱を前記シート及び前記突起部を介して前記流体に伝えることで水冷効率を向上させることを特徴とする請求項4〜6のいずれか一項に記載のタッチパネルシステム。
The protrusions are made of metal, claim 4-6, characterized in that to improve the water cooling efficiency to transmit heat generated from the flexible display in said fluid through said sheet and said projections The touch panel system according to one item.
前記流体が液体である事を特徴とする請求項1〜7のいずれか一項に記載のタッチパネルシステム。
The touch panel system according to any one of claims 1 to 7, characterized in that said fluid is a liquid.
前記画像解析部は、前記流体のRGB値と前記撮影画像の画素のRGB値とを比較することで、前記近接箇所における前記一方の面と前記他方の面との近接距離を算出することを特徴とする請求項1〜8のいずれか一項に記載のタッチパネルシステム。
The image analysis unit calculates a proximity distance between the one surface and the other surface at the proximity location by comparing an RGB value of the fluid and an RGB value of a pixel of the captured image. The touch panel system according to any one of claims 1 to 8 .
前記流体の色又は透明度を変更できることを特徴とする請求項1〜9のいずれか一項に記載のタッチパネルシステム。
The touch panel system according to any one of claims 1 to 9, characterized in that to change the color or transparency of the fluid.
前記タッチパネル本体部が人体の一部を模した形状であることを特徴とする請求項1〜10のいずれか一項に記載のタッチパネルシステム。
The touch panel system according to any one of claims 1 to 10 , wherein the touch panel main body has a shape imitating a part of a human body.
前記タッチパネル本体部が前記空間側に窪んだ第1格納部を備えることを特徴とする請求項1〜11のいずれか一項に記載のタッチパネルシステム。
The touch panel system according to any one of claims 1 to 11 , wherein the touch panel body includes a first storage section that is recessed toward the space.
前記流体から前記タッチパネル本体部に作用する圧力を制御するための流体圧力制御機構を備えており、
前記流体圧力制御機構は前記近接箇所の座標と前記近接箇所の形状の2つのうち少なくとも1つに基づいて前記圧力を変化させることを特徴とする請求項1〜12のいずれか一項に記載のタッチパネルシステム。
A fluid pressure control mechanism for controlling the pressure acting on the touch panel body from the fluid;
The fluid pressure control mechanism changes the pressure based on at least one of the coordinates of the proximity location and the shape of the proximity location, according to any one of claims 1 to 12 . Touch panel system.
一方の面が可撓性を有する材料から成り、他方の面が可視光透過性を有する材料から成り、前記一方の面と前記他方の面とに挟まれた空間内に着色された流体を収容する袋状のタッチパネル本体部と、
弾性変形可能なシートと、
可視光領域の波長の光を撮影可能であり前記他方の面を撮影するカメラと、
前記カメラの撮影画像の画素のRGB値を解析する画像解析部とを備えており、
フレキシブルディスプレイと一体に使用されるものであり、
前記シートは前記タッチパネル本体部の内部においてその表面が前記一方の面と密着しており、且つその裏面に複数の前記空間側に向いた突起部を備えており、
前記一方の面が前記フレキシブルディスプレイの背面と密着しており、
前記フレキシブルディスプレイの変形により発生する外力を受けて前記一方の面と前記他方の面とが近接し、当該近接箇所から前記流体が移動することにより生じる前記他方の面の色の変化を前記カメラが撮影し、
前記画像解析部は前記撮影画像の画素のRGB値解析結果に基づいて、前記他方の面上の前記近接箇所の座標と前記近接箇所の形状の2つのうち少なくとも1つを算出して前記フレキシブルディスプレイの映像に反映させることを特徴とするフレキシブルディスプレイ用のタッチパネルシステム。
One surface is made of a flexible material and the other surface is made of a material having visible light permeability, and contains a colored fluid in a space sandwiched between the one surface and the other surface. A bag-shaped touch panel main body,
An elastically deformable sheet;
A camera capable of photographing light of a wavelength in the visible light region and photographing the other surface;
An image analysis unit that analyzes RGB values of pixels of the image captured by the camera;
It is used together with a flexible display,
The sheet has a surface that is in close contact with the one surface inside the touch panel body, and a plurality of protrusions facing the space on the back surface.
The one surface is in close contact with the back surface of the flexible display;
The camera receives the external force generated by the deformation of the flexible display, the one surface and the other surface come close to each other, and the camera changes the color of the other surface caused by the fluid moving from the proximity location. Shoot and
The image analysis unit calculates at least one of the coordinates of the proximity location on the other surface and the shape of the proximity location based on the RGB value analysis result of the pixel of the captured image, and the flexible display Touch panel system for flexible displays, characterized in that it is reflected in the video.
JP2018145536A 2018-08-02 2018-08-02 Touch panel system for flexible display Active JP6450493B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018145536A JP6450493B1 (en) 2018-08-02 2018-08-02 Touch panel system for flexible display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018145536A JP6450493B1 (en) 2018-08-02 2018-08-02 Touch panel system for flexible display

Publications (2)

Publication Number Publication Date
JP6450493B1 true JP6450493B1 (en) 2019-01-09
JP2020021334A JP2020021334A (en) 2020-02-06

Family

ID=64960386

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018145536A Active JP6450493B1 (en) 2018-08-02 2018-08-02 Touch panel system for flexible display

Country Status (1)

Country Link
JP (1) JP6450493B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110047380A (en) * 2019-03-26 2019-07-23 武汉华星光电半导体显示技术有限公司 A kind of display panel and display device

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001337623A (en) * 2000-05-30 2001-12-07 Minolta Co Ltd Light unit, light guiding board, light guide and display unit using this light guide
WO2018047803A1 (en) * 2016-09-09 2018-03-15 株式会社ネットアプリ Touch panel and touch panel system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001337623A (en) * 2000-05-30 2001-12-07 Minolta Co Ltd Light unit, light guiding board, light guide and display unit using this light guide
WO2018047803A1 (en) * 2016-09-09 2018-03-15 株式会社ネットアプリ Touch panel and touch panel system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110047380A (en) * 2019-03-26 2019-07-23 武汉华星光电半导体显示技术有限公司 A kind of display panel and display device

Also Published As

Publication number Publication date
JP2020021334A (en) 2020-02-06

Similar Documents

Publication Publication Date Title
JP5346081B2 (en) Multi-touch touch screen with pen tracking
JP5411265B2 (en) Multi-touch touch screen with pen tracking
CN105683883B (en) Piezoelectric forces sense array
US8279200B2 (en) Light-induced shape-memory polymer display screen
CN102541364B (en) Optical touch input device and driving method thereof
US8957856B2 (en) Systems, methods, and apparatuses for spatial input associated with a display
KR101451925B1 (en) Window substrate for display device and display device having the same
US20080259052A1 (en) Optical touch control apparatus and method thereof
WO2020059780A1 (en) Touch panel system, intercommunication touch panel system, and recording medium
CN108700970A (en) Input equipment with force snesor
US10375227B2 (en) Mobile terminal
JP4682357B2 (en) Interface device with haptic touch panel
TW201426406A (en) Electronic device and method for rotating display image of the electronic device
TW201243892A (en) External touch-type keyboard
TW201108071A (en) Display with an optical sensor
WO2018047803A1 (en) Touch panel and touch panel system
JP6450493B1 (en) Touch panel system for flexible display
JP6349048B1 (en) Touch panel system
TWI354222B (en) Optical operating apparatus and judging method of
CN113260951A (en) Fade-in user interface display based on finger distance or hand proximity
US8194052B2 (en) Optical operating apparatus
KR101717780B1 (en) Waterproof Pack for Mobile Device
US9516204B2 (en) Electronic device and information processing method
KR101110753B1 (en) Input module, identification module and screen input device having the same capable of detecting touch point and pressure
KR20130007789A (en) Approch sensing touch system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180813

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180813

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180920

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181114

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181207

R150 Certificate of patent or registration of utility model

Ref document number: 6450493

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150