JP2013542523A - タイルを利用してセンシングするための装置、一連のプレートを有するセンサ、マルチタッチ表面のためのオブジェクト識別及び方法 - Google Patents
タイルを利用してセンシングするための装置、一連のプレートを有するセンサ、マルチタッチ表面のためのオブジェクト識別及び方法 Download PDFInfo
- Publication number
- JP2013542523A JP2013542523A JP2013533841A JP2013533841A JP2013542523A JP 2013542523 A JP2013542523 A JP 2013542523A JP 2013533841 A JP2013533841 A JP 2013533841A JP 2013533841 A JP2013533841 A JP 2013533841A JP 2013542523 A JP2013542523 A JP 2013542523A
- Authority
- JP
- Japan
- Prior art keywords
- grid
- sensor
- layer
- stress
- tile
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 126
- 238000004891 communication Methods 0.000 claims abstract description 98
- 239000002344 surface layer Substances 0.000 claims abstract description 51
- 239000012141 concentrate Substances 0.000 claims abstract description 21
- 239000010410 layer Substances 0.000 claims description 473
- 239000000463 material Substances 0.000 claims description 71
- 229920005989 resin Polymers 0.000 claims description 39
- 239000011347 resin Substances 0.000 claims description 39
- 239000002184 metal Substances 0.000 claims description 23
- 229910052751 metal Inorganic materials 0.000 claims description 23
- 230000004044 response Effects 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 15
- 239000011521 glass Substances 0.000 claims description 14
- 239000002023 wood Substances 0.000 claims description 11
- 239000000853 adhesive Substances 0.000 claims description 6
- 230000001070 adhesive effect Effects 0.000 claims description 6
- 230000009977 dual effect Effects 0.000 claims description 6
- 230000035882 stress Effects 0.000 description 210
- 239000011159 matrix material Substances 0.000 description 97
- 210000003811 finger Anatomy 0.000 description 56
- 210000002683 foot Anatomy 0.000 description 50
- 239000012790 adhesive layer Substances 0.000 description 33
- 230000004927 fusion Effects 0.000 description 27
- 238000003384 imaging method Methods 0.000 description 27
- 230000008569 process Effects 0.000 description 26
- 230000033001 locomotion Effects 0.000 description 24
- 230000006870 function Effects 0.000 description 23
- 239000000758 substrate Substances 0.000 description 21
- 238000003491 array Methods 0.000 description 19
- 238000005516 engineering process Methods 0.000 description 19
- 238000004519 manufacturing process Methods 0.000 description 19
- 238000012360 testing method Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 18
- 210000004247 hand Anatomy 0.000 description 17
- 230000008901 benefit Effects 0.000 description 15
- 241001270131 Agaricus moelleri Species 0.000 description 14
- 239000004020 conductor Substances 0.000 description 14
- 230000006835 compression Effects 0.000 description 13
- 238000007906 compression Methods 0.000 description 13
- 239000000872 buffer Substances 0.000 description 12
- 230000008859 change Effects 0.000 description 12
- 238000004458 analytical method Methods 0.000 description 11
- 238000010191 image analysis Methods 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 9
- 230000007246 mechanism Effects 0.000 description 9
- 230000002093 peripheral effect Effects 0.000 description 9
- 238000013459 approach Methods 0.000 description 8
- 230000002452 interceptive effect Effects 0.000 description 8
- 230000035945 sensitivity Effects 0.000 description 8
- 238000010561 standard procedure Methods 0.000 description 8
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 7
- 230000003993 interaction Effects 0.000 description 7
- 238000013507 mapping Methods 0.000 description 7
- 239000000047 product Substances 0.000 description 7
- 239000007787 solid Substances 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 241000282414 Homo sapiens Species 0.000 description 6
- 230000001427 coherent effect Effects 0.000 description 6
- 238000009826 distribution Methods 0.000 description 6
- 230000005484 gravity Effects 0.000 description 6
- 229920000122 acrylonitrile butadiene styrene Polymers 0.000 description 5
- 230000009471 action Effects 0.000 description 5
- 229920001971 elastomer Polymers 0.000 description 5
- 239000005060 rubber Substances 0.000 description 5
- 210000003813 thumb Anatomy 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- QTBSBXVTEAMEQO-UHFFFAOYSA-M Acetate Chemical compound CC([O-])=O QTBSBXVTEAMEQO-UHFFFAOYSA-M 0.000 description 4
- 239000008186 active pharmaceutical agent Substances 0.000 description 4
- 238000005266 casting Methods 0.000 description 4
- 239000002346 layers by function Substances 0.000 description 4
- 230000002829 reductive effect Effects 0.000 description 4
- 125000000391 vinyl group Chemical group [H]C([*])=C([H])[H] 0.000 description 4
- 229920002554 vinyl polymer Polymers 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- JAYCNKDKIKZTAF-UHFFFAOYSA-N 1-chloro-2-(2-chlorophenyl)benzene Chemical compound ClC1=CC=CC=C1C1=CC=CC=C1Cl JAYCNKDKIKZTAF-UHFFFAOYSA-N 0.000 description 3
- 229920002799 BoPET Polymers 0.000 description 3
- 101100084627 Neurospora crassa (strain ATCC 24698 / 74-OR23-1A / CBS 708.71 / DSM 1257 / FGSC 987) pcb-4 gene Proteins 0.000 description 3
- 240000004808 Saccharomyces cerevisiae Species 0.000 description 3
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000010408 film Substances 0.000 description 3
- 230000005057 finger movement Effects 0.000 description 3
- 238000001746 injection moulding Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000000465 moulding Methods 0.000 description 3
- 229920006267 polyester film Polymers 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 229920002379 silicone rubber Polymers 0.000 description 3
- 238000005033 Fourier transform infrared spectroscopy Methods 0.000 description 2
- 239000005041 Mylar™ Substances 0.000 description 2
- 238000005452 bending Methods 0.000 description 2
- 238000000748 compression moulding Methods 0.000 description 2
- 230000009133 cooperative interaction Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 229910003460 diamond Inorganic materials 0.000 description 2
- 239000010432 diamond Substances 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 210000001145 finger joint Anatomy 0.000 description 2
- 229920005560 fluorosilicone rubber Polymers 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000012886 linear function Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000010422 painting Methods 0.000 description 2
- 238000001259 photo etching Methods 0.000 description 2
- 229920003223 poly(pyromellitimide-1,4-diphenyl ether) Polymers 0.000 description 2
- 239000011253 protective coating Substances 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 239000012899 standard injection Substances 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000005303 weighing Methods 0.000 description 2
- 238000004804 winding Methods 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 229910001369 Brass Inorganic materials 0.000 description 1
- 239000004801 Chlorinated PVC Substances 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical compound [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 1
- 229910000831 Steel Inorganic materials 0.000 description 1
- 239000004809 Teflon Substances 0.000 description 1
- 229920006362 Teflon® Polymers 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 239000002313 adhesive film Substances 0.000 description 1
- 239000004840 adhesive resin Substances 0.000 description 1
- 229920006223 adhesive resin Polymers 0.000 description 1
- 230000000386 athletic effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000010951 brass Substances 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 229920000457 chlorinated polyvinyl chloride Polymers 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012888 cubic function Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013481 data capture Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000007123 defense Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011982 device technology Methods 0.000 description 1
- 230000006355 external stress Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000005305 interferometry Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 238000003698 laser cutting Methods 0.000 description 1
- 210000002414 leg Anatomy 0.000 description 1
- 229920001684 low density polyethylene Polymers 0.000 description 1
- 239000004702 low-density polyethylene Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000013011 mating Effects 0.000 description 1
- 210000001872 metatarsal bone Anatomy 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 229920002120 photoresistant polymer Polymers 0.000 description 1
- 238000000554 physical therapy Methods 0.000 description 1
- 229920003023 plastic Polymers 0.000 description 1
- 239000004033 plastic Substances 0.000 description 1
- 229920000728 polyester Polymers 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000009257 reactivity Effects 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000007650 screen-printing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000011540 sensing material Substances 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000011343 solid material Substances 0.000 description 1
- 239000000243 solution Substances 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 229920001187 thermosetting polymer Polymers 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 210000003371 toe Anatomy 0.000 description 1
- 238000012559 user support system Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
- G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
- G06F3/005—Input arrangements through a video camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
- G06F3/04144—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position using an array of force sensing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/045—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using resistive elements, e.g. a single continuous surface or two parallel surfaces put in contact
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/047—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using sets of wires, e.g. crossed wires
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04103—Manufacturing, i.e. details related to manufacturing processes specially suited for touch sensitive devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04112—Electrode mesh in capacitive digitiser: electrode for touch sensing is formed of a mesh of very fine, normally metallic, interconnected lines that are almost invisible to see. This provides a quite large but transparent electrode surface, without need for ITO or similar transparent conductive material
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04113—Peripheral electrode pattern in resistive digitisers, i.e. electrodes at the periphery of the resistive sheet are shaped in patterns enhancing linearity of induced field
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Force Measurement Appropriate To Specific Purposes (AREA)
- Measurement Of Length, Angles, Or The Like Using Electric Or Magnetic Means (AREA)
- Position Input By Displaying (AREA)
- Length Measuring Devices With Unspecified Measuring Means (AREA)
Abstract
Description
本出願は、2010年10月12日付けで出願された米国仮出願第61/404,897号、2011年2月8日付けで出願された米国仮出願第61/462,789号、2011年7月19日付けで出願された米国仮出願第61/572,642号及び2011年7月25日付けで出願された米国仮出願第61/572,938号からの優先権の利益を主張し、それらのすべてが参照によりここに組み込まれる。
アクティブセンシングアレイ:図1に図示されたアクティブセンシングアレイ20は、図2に図示されるように、他方に対して一方を90度回転して互いに面する2つのセンサ表面シート21を備える。図3及び図4の分解図で図示されるように、2つのセンサ表面シート21のそれぞれは、それらの上に印刷された少量の応力感知力を有する抵抗(FSR)材料24を有する印刷された導電性トレース線23を有する非導電性表面基板22から構成され、2つの表面シート21を互いに面するインクされた側で相互に接触して設置する場合には、FSR24材料はセンサ表面の他の位置では必要とされないが図1に図示されるように、導電性トレース線23のグリッドの交点に近接し、一定の間隔で設置される。
センサタイル2は、図38に概略的に図示されたように、複数の隣接するタイルを含む装置1において配線してデバイスを物理的に接続することによってくっつけて接続される。
図15において図示された半剛体タッチセンサ31及び突起部30は、樹脂、ガラス、木、金属もしくは任意の他の半剛体材料から作られた単一の機械的な部品とできる。この部品は、射出成形、刻印及び冷却鋳造を含む種々の標準的な方法によって製造される。
全体のプロファイルは、製造プロセスの間に部品層をアセンブリングすることによって作られる。
図12及び図13に図示されるように、半剛体タッチ層31及び突起部30の目的は、図11に図示されるように、すべての印加された応力がアクティブセンシング素子領域27に対してだけに、すなわちアクティブセンシングアレイ20における導体トレース23の接合部における外面もしくは内面において分配されるように、半剛体タッチ層31の外面に印加された連続的な応力34を再分配することである。
各センサ装置に対して、ここで説明された種々の実施形態を例示するように、表面上に与えられた応力は、すべての応力がセンシング素子26を含むアクティブセンシングアレイ20を含む1つもしくは複数のタイル2上のその表面下の圧力測定センシングアレイ20のグリッド上へと集中されるように機械的に再分配される。補間はこの機械的な再分配によって得られる。装置の外面上かつセンシング素子26の上方で接触が行われると、その位置に対して印加された応力がセンシング素子26において登録される。その接触がセンシング素子26上方の位置の間に移動されると、応力は複数のセンシング素子26に印加される。センシング素子26のそれぞれにおける接触の応力の再分配は、その接触の重心(centroid)を計算するように使用される。
1つのマイクロコントローラは各センサタイルに関連する。各センサタイルに対して、そのタイルのマイクロコントローラは、サブ領域内の連続した行/列のペアをスキャニングする。マイクロコントローラは、圧力情報のためにセンサをスキャニングするために、マイクロコントローラ上のデジタル及びアナログのI/Oピンを使用する。接続されると、一連の行と列とのワイヤ23は入力ワイヤ23もしくは出力ワイヤ23のいずれかに割り当てられる。出力ワイヤ23は、正の電圧を提供することができるかもしくはグランドに設定される。入力ワイヤ23は、グランドに設定されるかもしくはワイヤから電圧を読み込むことができる。各フレームの最初には、1つの出力ワイヤが正の電圧に設定される一方で、残りの出力ワイヤ23はグランドに設定される。入力ワイヤ23はまた、出力ワイヤ23と入力ワイヤ23との交点から来る電圧をスキャニングする1つのワイヤを除き、グランドに設定される。次に、ファームウェアは次の入力ワイヤをスキャニングする一方で、他のものをグランドに設定する。すべての入力ワイヤ23がスキャニングされた後に、次の出力ワイヤは正の電圧に設定される一方で、最初のものはグランドに設定され、入力ワイヤ23は再びスキャニングされる。このことがすべての交点がスキャニングされてしまうまで、すべての電圧ワイヤ23に対して繰り返される。
それが発生したタイルの同一性を用いてそれぞれがタグ付けされたデータパケットは、センサアレイにおけるすべてのタイルのマイクロコントローラによって共有された共通のデータ通信プロトコルを介して送信される。1つのセンサタイルは、マスタータイル7として示される。このマスタータイル7は、図38に図示されるように、ホストコンピュータ3に対してUSBもしくは同様の通信接続部9を所有する。マスタータイル7は、すべての圧縮されたパケットをホストコンピュータ3に送信する。
電子ホワイトボード。
所定のマイクロコントローラチップは、特定の数N個のデュアル/デジタルIOピンを有する一方で、マイクロコントローラチップ上にM個の全デジタルIOピン82を有する。N個のデュアルアナログ/デジタルIOピン81をN行のアクティブセンシングアレイ20に接続し、N列のアクティブセンシングアレイ20に対してM個までの全デジタルIOピン82までと接続することによって、単一のマイクロコントローラから駆動されるアクティブセンシングアレイ20は、補助的な電子部品を必要とすることなしに、(N×M)までの圧力センシング素子26を得ることができる。このアーキテクチャーは、結果として電子部品の簡単な配置を生じさせる。
現在、容易に大量生産されて任意の大きな表面領域のシームレスの表面を形成するように経済的に拡大可能な低コストの圧力センシングに対するソリューションは存在しない。実際、応力感知力を有する抵抗(FSR)材料24を使用するセンシンググリッドに基づいた[Rosenberg]及びTeKScan社によるUnMousePadデバイスなどの専門化された技術が存在するが[Eventoff]、これらのいずれのものもユニットセンシング領域あたり低コストで大きな表面領域まで確実に拡大させるようにデザインもしくは設計されていない。
ユーザの観点から、動作が以下に説明され、図35において図示される。
図13に図示されるように、内部動作は、指もしくはオブジェクト34が半剛体タッチ層31の外面上に下方向の応力を印加するときに始まる。
シームレスなタイリングセンサアレイの困難性がLCDアレイとの類推によって説明される。LCDモニタの集合物がより大きな画像を創造するように配列される場合、一般的には連続したモニタ間には目に見える隙間が存在する。この隙間は、ゼロでない領域で占められた各モニタの画像領域の外側に、エッジ接続部とエレクトロニクス(電子部品)が存在するという事実によって生る。例えばテックスキャンセンサアレイなどの既存のFSRベースの圧力センサアレイは、同じ問題を被る。すなわち、接続部と電子部品とによって占められたアクティブセンシング領域周りのゼロでない領域は幾何学的な隙間を創造する。この隙間のために、複数のテックスキャン(TecScan)センサアレイはシームレスなより大きなセンシング表面を創造するようにタイリングすることはできない。
機械的な層がアクティブセンシングアレイ20の最上に配置される。この層の目的は、この応力のすべてをアクティブセンシングアレイ20の表面のアクティブ領域に対して排他的に伝達されるように、機械的な層上に対して下方向に印加された応力を再分配するということである。図10及び図11に図示されるように、ここで、「アクティブ領域」27は、それらが交差するそれらの間に挟まれたFSR材料24を有する、上部の導電性ワイヤ23と下部の導電性ワイヤ23とが交差する任意の領域として定義される。特に、そのようなすべての交点は、圧力データを測定するためのセンシング素子26に対応する。
一実施形態では、導電性トレース線23は、図3に図示されるように、例えばプラスチィク(樹脂)などの非導電性基板22にわたって金属注入されたインクによって印刷される。すべてのトレーシング23は、同一の線幅とすることができ、トレース23のルーティングは、異なる/より薄い線幅の可能性のあるタイルを用いて、タイルの回路ボード4に対する接続のためのコネクタテール25を形成し続ける。タイルの一実施形態では、タイルのプリント回路基板4に対するコネクタテール25は、図33及び図34に図示されるように、アクティブセンシングアレイ20直下に設置された回路ボード4を用いて、突起部31及び支持層32の周りをタイルの裏面に対して折られる。図18に図示されるように、この配列によって、隣接するタイルが隣接するタイル間のセンシング領域での隙間がない状態でスムーズに隣接することを可能とする。
アクティブセンシングアレイ20の領域は正方形である、トレース線23に対する本発明のパターンの一実施形態では、タイル2に対するアクティブセンシングアレイ20の上半分のセンサシート21と底面のセンサシート21とは正確には同一である。センサシート21に関し、底面のセンサシート21は90度回転させて次にひっくり返される。これが実行されると、図2に図示されるように、接合部と印刷されたFSR24とはお互いにぴったりと合う。
分離したプリント回路基板(PCB)を必要とするよりむしろ、すべての電子部品は、一実施形態では、アクティブセンシングアレイ20上に直接的に印刷され及び/又はアセンブリングされ、それによって製造のコスト及び複雑性を大幅に減少させる。
応力センシング抵抗は、表面に対して応力を加えるに従って抵抗を変化させる半導電性材料からなる。一般的に、FSRは、材料に半導電性をもたらす電気的に導電性及び非導電性粒子からなる。通常、FSRは、スクリーン印刷処理を用いて塗布された(applied)シートとしてもしくはインクとして供給される。FSRは低コストであって耐久性がある。
タイルの各グループに対して、3つのタイプのファームウェアが存在する。すなわち、スレーブ通信とマスター通信とホスト通信である。スレーブファームウェアは、各センサタイルに対するマイクロコントローラ上に設置され、そのセンサに対する圧力情報を集めるように使用される。マスターファームウェアは、少なくとも1つのマイクロコントローラ上に設置され、タイルのグループ間の通信を管理し、ホスト通信ファームウェアは、圧力データをコンピュータに送信する。
スレーブファームウェアは、マイクロコントローラ上のデジタル及びアナログI/Oピンを用いて圧力情報のためにセンサをスキャンする。接続されると、一連の行及び列の配線は、出力もしくは入力の配線のいずれかに割り当てられる。出力配線は、正電圧を提供するかもしくはグランドに設定される。入力配線は、グランドに設定されるかもしくは配線からの電圧を読み込むかのいずれかとすることができる。入力配線はまた、出力配線と入力配線との交点からくる電圧をスキャンする1つの配線を除き、グランドに設定される。次に、ファームウェアは次の入力配線をスキャンする一方で、他はグランドに設定される。すべての入力配線がスキャニングされた後、次の出力配線は正の電圧に設定される一方で、最初のものはグランドに設定され、入力配線はふたたびスキャニングされる。これがすべての電圧配線に対してすべての交点がスキャニングされてしまうまで繰り返される。
マスターファームウェアは、個々のタイルから他のマスタータイルもしくはコンピュータに対して情報のフローを処理する。各タイルからの圧力フレーム情報を得るために、通信プロトコルはマスターマイクロチップとスレーブマイクロチップとの間で確立される。プロトコルトポロジーは、タイルのグルーピングの大きさ、形状及び所望の挙動によって変動する。通信プロトコルでは、データはマスターマイクロコントローラによってポーリングされるかもしくはマスターマイクロコントローラにストリーミングされるかのいずれかとすることができる。ポーリングシステムでは、マスターは、個々のタイルからフレームを要求し、マスタータイルに対するデータのフローを管理する。ストリーミングシステムでは、センサは、データが受信されてしまうまで、そのデータをマスターにストリーミングしようと試みる。マスターコントローラに送信されたデータは、完全なフレームのデータを表すことができるし、もしくは圧縮することができる。一つのケースでは、ランレングス符号化は、反復されたゼロを除去することによってフレームのサイズを減少させる。もう1つの圧縮の形態は、2つのフレーム間の差だけを送信することを含む。フレーム間の差だけを送信することによって、圧力シグネチャにおける変化を有さないセンサ上の静的なオブジェクトは、それらの領域の周りのマスターに任意の連続的なデータを送信することを必要としない。
ハードウェア部品のリスト
・ホストコンピュータ3
・USBコネクタ9
・プリント回路基板8
・マイクロコントローラ5
・半剛体タッチ層31
・アクティブセンシングアレイ20
・物理的な基板支持表面32
・タイル間の通信ケーブル10
・隣接する質問/センス配線13
・タイル間の物理的な接続コネクタ71
・装置ハウジング/フレーム14
・ノースQSW84は、(もしそれが存在すれば、)その上のタイルのサウスQSW85に接続されるであろう。
・サウスQSW85は、(もしそれが存在すれば、)その下のタイルのノースQSW84に接続されるであろう。
・イーストQSW86は、(もしそれが存在すれば、)その左のタイルのウエストQSW87に接続されるであろう。
・ウエストQSW87は、(もしそれが存在すれば、)その右のタイルのイーストQSW86に接続されるであろう。
・支持層32。
・マイクロプロセッサ4を有するプリント回路基板(PCB)。
○プリント回路基板4は、支持層32の底面に搭載されてもよい。
○タイル間通信ケーブル10は、隣接するタイル2に対する接続のためにプリント回路基板4に取り付けられる。
〇4つの質問/センス接続配線84−87は、プリント回路基板4に取り付けられる。
〇ホスト通信タイル12のためのホスト通信タイルプリント回路基板95はまた、ホストコンピュータ3と接続するためのUSB接続配線9を有するであろう。単一のタイルの実施形態のケースでは、その単一のタイルのプリント回路基板4はまた、ホスト通信タイルの機能性を提供することができる。
・(N×M)個のグリッドのセンシング素子と制御配線23とから構成するアクティブセンシングアレイ20。
〇アクティブセンシングアレイ20は、支持層32の上方に設置される。
〇アクティブセンシングアレイ20は、支持層32の端部の周りに巻き付けられる。
〇アクティブセンシングアレイ20は、アクティブセンシングアレイ20上のコネクタテール25を用いてタイルPCB4に接続される。
・取り付けられた突起部55を有するアクティブセンシングアレイの実施形態が図119において図示されるように、突起部30は、対応するセンシング素子26の位置におけるアクティブセンシングアレイ20の外面上に取り付けられる。
・半剛体タッチ層31。
〇半剛体タッチ層31は、アクティブセンシングアレイ20の最上に設置される。
・N行に対する導体線23を有する1つの層。
・M列に対する導体線23を有する1つの層。
・行/列の交点における応力感知力を有する抵抗(FSR)材料24。
・行と列との導体線それぞれに対応するN本の配線とM本の配線とを有するコネクタテール25。コネクタテールは16個のバンクに分割される。
全体のタイル2のアセンブリは、樹脂もしくは他の材料から作られたフレームでハウジングされてもよい。
・プログラマブルマイクロコントローラ5。
・(以下に説明される)センサデータ収集及び通信に対するマイクロコード。
・N列M行を有するアクティブセンシングアレイ20。
・図38に図示されたように、例えばI2Cなどのマスター/スレーブバスをサポートするためのタイル間通信配線10。
・ホストコンピュータ3に対するUSB接続9。
・例えばマイクロチップ製のPIC24HJ256GP610マイクロコントローラなどはI2Cサポートを提供する。
・I2Cは、工業標準マスター/スレーブバスプロトコルである。
・I2Cは、固有IDをバス上のスレーブに動的にアサインするためのプロトコルを提供する。
・例えばマイクロチップ製のPIC24HJ256GP610マイクロコントローラなどはUSBサポートを提供する。
・例えばマイクロチップ製のPIC24HJ256GP610マイクロコントローラなどはこの能力を有する。
・ホスト通信タイル12は、ホスト通信タイルファームウェアを含むであろう。
・図38に図示された例では、タイルT−0は、グリッドに対しては、ホスト通信タイル12として及びマスタータイル7として動作している。
・すべての他のタイルは、考慮されたスレーブタイル11であろう。
・スレーブタイル11は、スレーブタイルファームウェアを含むであろう。
・スレーブタイル11は、I2C標準プロトコルのような固有IDを取得したであろう。
1.ローカルタイルセンサグリッド圧力画像キャプチャリング(補足すること)。
2.スレーブ11からマスタータイル7及び/又はホスト通信タイル12に対してデータを得ること。
3.ローカルタイルセンサグリッド圧力画像をホストコンピュータ3に通信すること。
4.ホストコンピュータ3上にマルチタイル圧力画像の再構築のために、タイルトポロジー及び/又はアジャセンシーデータをホストコンピュータ3に通信すること。
5.隣接するタイルのトポロジーアジャセンシーデータの初期のダイナミックディスカバリー。
〇留意すべきことは、もし事前にアサインされたIDがタイルトポロジーの手動格納と一緒にタイルに適用されたならば、このステップは必要とされないであろう、ということである。
・すべてのタイルは質問センシング配線84−87を有する。
・すべてのタイルはそれらのコネクタテールクリップ16に接続するコネクタテール25を有する。
・ゾーンに対するマスタータイル7及び非ターミナルスレーブタイル11は、出力のタイル間通信ケーブル89を有する。
・スレーブタイル11は、入力のタイル間通信ケーブル88を有する。
・ホスト通信タイル12は、(一実施形態では、)USBケーブルを有するであろう。
・マルチゾーン装置では、ゾーンに対するホスト通信タイル12及び非ターミナルマスタータイル7は、出力のマスターとマスターとのマルチゾーン通信ケーブル74を有する。
・マルチゾーン装置では、ゾーンに対する非ホスト通信マスタータイル7は、入力のマスターとマスターとのマルチゾーン通信ケーブル73を有する。
画像キャプチャリングマイクロコードは、そのタイルに対する圧力データのフレームに対応する測定されたセンシング素子の値の(N×M)個の数値の圧力画像バッファを保持するであろう。このバッファにおける値は以下の方法で測定される。
・圧力画像バッファの(i,j)成分は、行と列との交点に対する圧力値に対応するであろう。
・上述された方法のように、画像バッファアレイの(i,j)成分は以下によって測定されてもよい。
〇i番目の出力配線を除くすべての出力配線をグランドに設定する。
〇i番目の出力配線を正に設定する。
〇j番目の入力配線を除くすべての入力配線をグランドに設定する。
〇ファームウェアは、それをデジタル値として読み込んでj番目の入力配線をスキャンするであろう。
〇この値は、圧力画像バッファの(i,j)成分において格納されるであろう。
・すべてのN本及びM本の配線を通してループすることによって、完全な(N×M)個の圧力画像バッファデータが測定される。
マスタータイル7上のマイクロコードは、圧力画像データに対してそれぞれのスレーブタイル11をポーリングするであろう。
・各スレーブからの報告されたデータパケットは、タイルID及び圧力画像バッファデータを含むであろう。
・簡単にするために、圧力画像バッファデータはタイルの画像バッファの完全なコピーであると仮定する。
〇代わりに、それはランレングス符号化される。
〇代わりに、それは(前に報告されたバッファからの変化だけの)デルタを提供することができる。
〇いずれか一方、両方または他の技術が、データ転送サブシステムに対するパフォーマンスを改善するように適用される。
上記(2)を展開すると、マスターホスト通信タイル7は以下を実行するであろう。
・各スレーブタイル11に対して、
〇I2Cバスを介して圧力画像データに対して各スレーブタイル11をポーリングする。
〇I2Cバスを介してスレーブタイル11の圧力画像データを受信する。
〇USBを介してスレーブタイル11の圧力画像データをホストコンピュータ3に送信する。
・USBを介してそれ自身の圧力画像データを、(もしタイルに接続されれば、)ホストコンピュータ3に送信する。
一実施形態では、それぞれにそれらのそれぞれのアクティブセンシングアレイ20において(N行×M列)のグリッドのセンシング素子26を含む(A行×B列)のグリッドの圧力タイル2は、再構築可能な圧力画像のアドレス可能な圧力データの(A×N)行及び(B×M)列のグリッドの有効圧力表面を生成する。
・一実施形態では、これはホストコンピュータ上で手動で格納される。
・もう1つの実施形態では、それはタイル隣接テーブルから動的に構築される。
・タイル行rとタイル列cとの値がタイルトポロジーテーブルで調べられてもよい。
・タイル圧力画像データが(i,j)に対するタイルのセンシング素子データを(r×N+i,c×M+j)にマッピングすることによって、コヒーレントな((N×A)×(M×B))個の全体の圧力画像にマッピングされる。
初期段階の間に、すべてのタイルの相対位置が(特に指定のない限り)I2Cバスを介して、以下の一連のデータ交換によって取得される。
・各スレーブタイル11に対してとマスタータイル7に対して、
〇各ノース、サウス、イースト及びウエストに対して、
・質問タイルIDに対するその方向(ノース84、サウス85、イースト86、又はウエスト87)に対して、対応する質問/センシング配線をタイルがオンすることを要求するデータパケットを送信する。
・パケットコンテンツ:オンするための質問タイルID及び方向配線。
・適切なタイルから質問/センス応答パケットを受信する。
・「パケットコンテンツ:検出された」、方向(ノース/サウス/イースト/ウエスト)、検出されたタイルID、(検出するタイルからの)質問タイルID。
・パケットコンテンツ;「接続されていない」、方向、質問タイルID。
・USBを介して応答パケットをコンピュータ3に送信する。
・もしそのタイルが(もしかしたら終端レジスタによって)タイルが指定された方向で接続されないことを検出すれば、
〇「接続されていない」応答パケットをマスターに送信する。
〇パケットコンテンツ;「接続されていない」、方向、質問タイルID。
・そうでなければ、指定された方向の質問センシング配線(ノース84、サウス85、イースト86、ウエスト87)を「オン」にする。
〇「検出された」及びそのIDデータパケットをマスターに送信する。
〇「パケットコンテンツ:検出された」、方向(ノース/サウス/イースト/ウエスト)、検出されたタイルID、(検出するタイルからの)質問タイルID。
〇留意すべきことは、検出する配線方向は、検出されたタイル方向とは反対方向である:すなわち、ノース配線84のオン状態を検出することは、サウス側のタイルを指示する;サウス配線85は、ノース側のタイルを指示する;イースト配線86は、ウエスト側のタイルを指示する;ウエスト配線87は、イースト側のタイルを指示する。
・以下によって、ノース/サウスコネクティビティに対応するタイルIDの一連のM個の正しく並べられた列を創造する。
〇そのノースの隣接物として「なし」を有するM個のタイルIDのそれぞれに対して、
・そのサウスの隣接物に対してこれを有するタイルIDをサーチする。
・そのサウスの隣接物として「なし」を有するタイルIDまで反復する。
・以下のように、一連の左から右へのM個の正しく並べられた列のリストを配列する。
〇ウエスト方向において、「なし」を有する1つのために、一連の列のリストの第1の成分をサーチする。これは最も左の列である(すなわち、列0である。)。
〇第1の成分がまさに探し出された1つのイーストである列リストをサーチする。
〇第1の成分がイーストの隣接物を有さない列リストにおけるまで反復する。
・それぞれの行/列の数のタイルIDを得ることによってアジャセンシーテーブルを追加することができる。
〇列の数は、配列された列リスト位置からである。
〇行の数は、それぞれの列リストにおける位置である。
構築された試作品の一例としての説明:(a)各層に対して使用された実際の材料、(b)寸法、(c)各タイルのサイズ、(d)何枚のタイルが使用されたか、(e)製品番号及び所定の部品を製造した会社。
(a)各層に対して使用された実際の材料
各センシングタイルに対して使用された個々のセンシング材料は、5ミルの厚さの樹脂基板、(3/8インチの間隔で設置された)プリント銀電極及びグリッド交点に近接した小さな長方形のFSR材料から構成される。
(b)寸法
各センシングタイルのアクティブセンシング領域は12インチ×12インチである。
(c)各タイルのサイズ
各タイルは配線間の間隔が3/8インチであって12インチ×12インチである。
(d)製品番号及び所定の部品を製造した会社
試作品の圧力感度をテストするために4つの点がある5グラムのベースは、配線交点上の点の1つによって設置された。5グラムと10グラムの重量は、5グラムから300グラムまでの重量を作るためにベース上に設置された。交点はこの重量の4分の1を受信したので、その交点では重量範囲は1.25グラムから75グラムまでの範囲で変化した。2.5グラムより重い重量に対してだけその値がコンピュータによって登録された。コンピュータからの値は、46.87から1320.71まで線形的にスケーリングされた。
0グラム 0
2.5グラム 46.87
5グラム 101.65
7.5グラム 167.97
10グラム 218.75
12.5グラム 265.62
25グラム 468.75
50グラム 871.34
75グラム 1320.71
・すべての部品のリスト
〇一体化された突起部及びベース層42
〇アクティブセンシングアレイ20
〇半剛体タッチ層33
〇USBケーブル9及びUSB送受信機80
〇コンピュータ3
〇マスタータイル7
・動作:外側の観点
〇1つもしくはそれ以上のオブジェクトが圧力センシング装置1と接触して設置される。圧力センシング装置1は、表面上のオブジェクトの空間変動する圧力に対応する圧力の二次元アレイをコンピュータに送信する。
〇ユーザは複数の位置で圧力センシング装置1をタッチし、デバイスは位置及び各位置における圧力の両方を指示する。
指もしくは他のオブジェクトが半剛体タッチ層31上に下方向の応力が印加されると、内部動作が始まる。
図19は、以下の部品を有する圧力タイル2の分解図を図示する。すなわち、一体化された突起部及びベース層42、2つのアクティブセンシングアレイ20、半剛体タッチ層31。アクティブセンシングアレイ20上の導電性トレース線23の交点は、FSR材料24のセンシング素子26の位置である。層が接触して設置される場合は、アクティブセンシングアレイ20における各交点は、一体化された突起部及びベース層42における対応する突起部30の中心で位置合わせされる。
図1に図示されたように、アクティブセンシングアレイ20は、お互いに向かい合った2つのセンサ表面シート21からなり、ここで、図2に図示されるように、一方のセンサ表面シート21は他方のセンサ表面シート21に対して90度回転される。図4は、図3において完成したセンサ表面シート21の層を図示する。2つのセンサ表面シート21のそれぞれの上には導電性トレース線23が印刷される。少ない量の応力感知力を有する抵抗(FSR)材料24が2つの基板がお互いに面するFSR材料24側でお互い接触して設置されるときに、各センサ表面シート21上に印刷されたFSR材料24が導電性トレース線23のグリッドの交点近傍に設置されるような間隔で印刷される。重なるFSR材料24のグリッドの交点は、圧力が測定されてもよいセンシング素子26を備える。
半剛体タッチ層31とアクティブセンシングアレイ20と一体化された突起部及びベース層42との3つの部品はそれぞれ、図121に図示されるように、単一のセンシング素子における動作の内部機構を説明するために、5つの機能的な層から構成されるように図示される。
(1)半剛体タッチ層31;
(2)外側の非導電性表面基板22、(この図121には図示されない)外側の導電性トレース線23、内側及び外側のFSR材料24層、(この図121には図示されない)内側の導電性トレース線23並びに内側の非導電性表面基板22から構成されるアクティブセンシングアレイ20;
(3)突起部30を含む一体化された突起部及びベース層42。
隣接した圧力タイル2のネットワークで結ばれたタイルアセンブリ18を用いて、半剛体タッチ層31は、グリッドの圧力タイル2における圧力タイル2のすべてをカバーする(例えば薄い半剛体樹脂などの)単一の途切れのない半剛体材料のシートから構成される。これが異なる隣接した圧力タイル2のアクティブセンシングアレイ20における隣接するセンシング素子30の機械的な補間処理は各個々の圧力タイル2内の隣接するセンシング素子30の機械的な補間処理と同一であるという利点を有する。ユーザの観点からの効果は、タッチ応答を補間することは単一の極端に大きな圧力タイル2のタッチ応答を補間することに正確には等しいいうことである。
1)図25は、応力が同一の圧力タイル2上の4つの突起部30に分配されるであろう領域69を図示する。
2)図26は、応力が2つの隣接した圧力タイル2のそれぞれに対する2つの突起部30に分配されるであろう領域69を図示する。2つの圧力タイル2が接触する端上の領域において印加された圧力は2つの隣接するが物理的に異なる圧力タイル2上の近くの支持突起部30に対して応力を伝達し、そこから2つの圧力タイル2のアクティブセンシングアレイ20の圧力センスに伝達する。途切れのない半剛体タッチ層31は、2つの圧力タイル2に及ぶ。隣接した圧力タイル2の端に沿って印加された圧力は、あたかもそれらのセンシング素子26が同一のタイル上に存在したかのような方法で応力を(各それぞれの圧力タイル2上2つの)4つのセンシング素子26に分配するであろう。次に、補間方法は、あたかもそれがコヒーレントなより大きな「画像」であるかのように隣接した圧力タイル2にわたって圧力値を処理することができる。
3)図27は、応力が4つの隣接した圧力タイル2のそれぞれに対する1つの突起部30に分配されるであろう領域69を図示する。図27に図示するように、4つの圧力タイル2が接触する角125での領域において印加された圧力は4つの隣接するが物理的に異なる圧力タイル2上の近くの支持突起部30に対して応力を伝達し、そこから導電性トレース線23が4つの異なる圧力タイル2のアクティブセンシングアレイ20上で交差する圧力感知力を有するセンシング素子30に伝達する。途切れのない半剛体タッチ層31は、4つの圧力タイル2に及ぶ。これらの隣接した圧力タイル2の角125において印加された圧力は、あたかもセンシング素子26が同一の圧力タイル2上に存在したかのような方法で応力を(各それぞれのセンサタイル上1つの)それらの4つのセンシング素子26に分配するであろう。次に、補間方法は、あたかもそれが圧力の単一のコヒーレントなより大きな「画像」の一部であるかのように隣接した圧力タイル2にわたって圧力値を処理することができる。
圧力タイル2を有する突起部30を単一の機械的なパーツの中に一体化することが、複数の圧力タイル2の位置を登録することをより容易とさせる。圧力タイル2にわたって位置を登録することは、それが単一の圧力タイル2内で振る舞うのと同じように複数の圧力タイル2にわたって振る舞うという補間スキーム(方法)をもたらす際に重要となる。センサタイルの一体部分である突起部30を含む支持層32を作ることによって、センサタイルにわたって突起部30を登録することは、各圧力タイル2をその隣接物に対してまさに機械的に取り付けることによって達成される。
単一のタイルアセンブリ48の一実施形態では、単一の圧力タイル2は、コンピュータに直接的に接続されてもよく、別個のもしくは一体化されたホスト通信プリント回路38は必要とするがマスタープリント回路基板19を必要としない。図32及び図33に図示されるように、そのような実施形態がタイルの端部の周りに巻き付けられ、一体化された突起部及びベース層42の下側に取り付けられたタイルプリント回路基板4に接続されたフレキシブルアクティブセンシングアレイ20と用いてアセンブリングされる。半剛体タッチ層31は、アクティブセンシングアレイ20の最上に位置する。単一のタイル実施形態では、図35に図示されるように、タイルプリント回路基板4上のマイクロコントローラ5は、例えばUSBなどのコンピュータ3に接続されるUSBケーブル9を介してスキャニング及びホスト通信の両方を実行することができる。
複数のタイルの一実施形態では、スレーブタイル12は、コンピュータ3に接続された一体化されたもしくは分離したホスト通信回路95を有してもよいマスタータイル7もしくはマスタープリント回路基板19に対してデイジーチェーン接続されてもよい。そのような実施形態が図50において図示されるようにマスタープリント回路基板19に接続された直列のスレーブタイル12を用いてアセンブリングされ、直列のスレーブタイルから圧力データを得るためのマスター/スレーブバスプロトコルを可能とする。半剛体タッチ層31はそれらのそれぞれの個々のアクティブセンシングアレイ20の最上のスレーブタイル11に及ぶ。マスタープリント回路基板19上のマイクロコントローラ5は、スレーブタイル11からデータを収集し、そのデータをUSB送受信機80及びUSBケーブル9を介してデータをコンピュータ3に送信するホスト通信回路95に送信する。
2つのプロトタイプの圧力感度をテストするために、4つの点上に位置する5グラムのベースが、センシング素子26上方の各点を用いて半剛体タッチ層31の最上に設置された。5グラム重量が5グラムから100グラムまでの重量を作り出すためにベース上に設置された。各センシング素子26はこの重量の4分の1を受けるので、質量は各センスでは1.25グラムから25グラムまで変化した。
タッチ層−0.5ミリのビニル。
センサ−108キロオーム抵抗のインクセンサ。
突起層−4ミリの直径の半球状。
交点での重量 ビジュアライザ上の平均値
5グラム 0
10グラム 7.5
15グラム 14.5
20グラム 23
25グラム 32
タッチ層−1ミリのビニル。
センサ−108キロオーム抵抗のインクセンサ。
突起層−2ミリの直径の頂部が平面で切断された円錐状。
交点での重量 ビジュアライザ上の平均値
5グラム 0
10グラム 0
15グラム 2
20グラム 17.5
25グラム 25
すべてのハードウェア部品のリスト.
・すべての部品のリスト
〇センサタイル2の集合物。
・センタタイルは以下を備える。
・フレキシブルタッチ層38。
・1つもしくは複数の接着層40。
・技術:一体化されたプレート及び突起部行列部品。
〇一体化されたプレート及び突起部層36。
〇ベース層47。
・技術:別個のプレート及び突起部行列部品。
〇プレート層53。
〇一体化された突起部及びベース層42。
・すべての他の部品は上述された通りである。
〇すべての他の部品は上述された通りである。
図52は、一体化されたプレート及び突起部行列部品の実施形態の分解図を図示する。すなわち、フレキシブルタッチ層38、一体化されたプレート及び突起部層(IPPL)36、アクティブセンシングアレイ20、ベース層47。複数の層が接触して設置される場合、IPPL36における各突起部はアクティブセンシングアレイ20の外面上のセンシング素子27のアクティブ領域と接触するように位置合わせされる。接着層40はまた、フレキシブルタッチ層38とIPPL36との間で使用されてもよいので、これらの層は機械的に接続される。同様に、接着層40はまた、IPPL36とアクティブセンシングアレイ20との間で使用されてもよい。同様に、接着層40はまた、アクティブセンシングアレイ20とベース層47との間で使用されてもよい。
アクティブセンシングアレイ(ASA):上述された。
図86は、応力分配の断面を図示する。すなわち、フレキシブルタッチ層38、一体化されたプレート及び突起層36、アクティブセンシングアレイ20、ベース層47、外部から印加されたタッチ力34である。IPPL36は、プレート35及び突起部30を含む。突起部30は、アクティブセンシングアレイ20上のセンシング素子26によって位置合わせされる。
a)接着層40の一方側は、フレキシブルタッチ層38の内面に取り付けられる。
b)その接着層40の反対側はIPPL36の外面に取り付けられる。
c)第2の接着層40の一方側は、アクティブセンシングアレイ20の外面に取り付けられる。
d)その接着層40の反対側は、IPPL36上の突起部30は、アクティブセンシングアレイ20上の対応するセンシング素子26によって位置合わせされるように、IPPL36の内面に取り付けられる。
e)第3の接着層40の一方側は、アクティブセンシングアレイ20の内面に取り付けられる。
f)その接着層40の反対側はベース層47の外面に取り付けられる。
以下のテストでは、校正された重量が配線交点上方に設置された。5グラムの重量の小さなラバーシリンダーはその交点で応力を集中するように使用された。
重量(グラム) センシング素子(*)からの値
20 30
40 95
60 150
80 200
100 260
120 320
140 340
160 380
180 410
200 425
250 480
(*)ここでのプロトタイプ実施形態では、これらはPIC24チップのA/D回路から測定された値であって、電圧に基づいた値である。その値は12ビットの非負の値として測定される。
一実施形態では、金型が樹脂部分のための金型を作るための工業標準的な技術を用いてIPPLのために作られる。IPPL部分は標準的な射出成形金型及び成形技術を用いてABS樹脂から射出成形金型を介して製造される。
a)接着層40の一方側はプレート行列層53の外面に取り付けられ、対向する側面上の保護被覆が損傷を受けない状態とする。
b)第2の接着層40の一方側はプレート行列層53の内面に取り付けられ、対向する側面上の保護被覆が損傷を受けない状態とする。
c)各プレート接合部におけるノッチがつけられた溝において接続材料のすべてが破壊されてしまうまでプレート行列層53を優しく曲げる。これによって2つの接着層間におけるプレート行列層53と、もはや他のプレートに強固に取り付けられていない各プレートとを用いて、フレキシブルサンドイッチ構造の状態となる。
d)アクティブセンシングアレイ20は、ステップ(b)からの接着層40の対向する側を用いてプレート行列層53の内側上に(すでに配置された)接着層40に取り付けられる。アクティブセンシングアレイ20からのセンシング素子27は、プレート行列層53上のプレート接合部によって位置合わせされる必要がある。
e)第3の接着層40の一方側は、アクティブセンシングアレイ20の内面に取り付けられる。
f)一体化された突起部及びベース層42は、ステップ(e)からの接着層40の対向する側面を用いてアクティブセンシングアレイ20の内側上に(すでに設置された)接着層40に取り付けられる。アクティブセンシングアレイ20からのセンシング素子27は、突起層42上の突起部30によって位置合わせされる。
g)フレキシブルタッチ層38は、ステップ(a)からの接着層40の対向する側面を用いて、プレート行列層53の外側上の接着層40に取り付けられる。
以下のテストでは、校正された重量は配線交点上方に設置された。5グラムの重量の小さなラバーシリンダーが応力を交点に集中させるために使用された。
重量(グラム) センシング素子(*)からの値
20 0
40 120
60 230
80 320
100 420
120 500
140 540
160 570
180 605
200 620
250 650
(*)ここでのプロトタイプ実施形態では、これらはPIC24チップのA/D回路から測定された値であって、電圧に基づいた値である。その値は12ビットの非負の値として測定される。
プレート行列層の一実施形態は、上述したレーザ切断を含む。
一実施形態では、金型は樹脂部分に対する金型を形成するための工業標準的な技術を用いて突起層に対して創造される。突起層部分は、標準的な射出成形金型及び成形技術を用いてABS樹脂から射出成形を介して製造される。
図92は、単一のスタンドアローンタイルの実施形態を図示する。すなわち、フレキシブルタッチ層38と、ベース層32と、アクティブセンシングアレイ20と、プリント回路基板4。
一体化されたプレート及び突起層(IPPL)技術を用いた一実施形態では、グリッドのセンサの部分であるが、余分な行及び/又は余分な列のブリッジングプレート37を有してもよい個々のタイルセンサは、上述した単一のタイルとほとんど同一である。特に、図93における分解図において図示されるように、(N×M)のアクティブセンシングアレイ20及びIPPL36における対応する(N×M)行列の突起部30を有する個々のタイルは、(N×M)行列のプレート35を結果として生じるIPPL36における余分な行及び列のブリッジプレート37を有してもよい。これは上述した((N−1)×(M−1))行列のプレート35が存在するそのような(N×M)のアクティブセンシングアレイ20に対するIPPL36とは異なる。留意すべきことは、これらの余分なブリッジングプレート37の付加的な角上には突起部30は存在しない、ということである。フレキシブルタッチ層38は、グリッドのタイルにおけるすべてのタイルに及ぶ単一の連続的なシートであろう。
この実施形態では、ブリッジプレート37は、異なるタイル上の2つの突起部30をまたぐかもしくは角のブリッジングプレート37の場合では、4つのタイル上の4つの突起部30をまたぐ。応力のそれぞれのセンシング素子26に対する伝達に関して、複数のタイル2をまたぐ突起部上のブリッジプレート37と単一のタイル2上の4つの突起部30をまたぐプレート35とに対する配列における機械的な差は存在しないので、機械的な補間の方法はブリッジプレートに対してと非ブリッジプレートに対してとは同一である。
一実施形態では、図102に図示されるように、ノースとイーストとに沿ったタイルとノースイーストの角のグリッドのタイルとは異なるタイプのタイルが存在してもよい。図103は、ノースタイル64がイーストの列のブリッジプレート37を含み、イーストタイル65がノースの行のブリッジプレート37を含み、NEの角のタイル66はブリッジの行もしくはブリッジの列を含まず、内部タイル63はノースのブリッジの行及びイーストのブリッジの列の両方のブリッジプレート35を含むことを図示する。(N行×M列)のグリッドのタイルに対するこの実施形態では、図102で図示されるように、((N−1)×(M−1))の内部タイル63、N行のノースタイル64、M列のイーストタイル65、及び1つのNEタイル66が存在するであろう。
これは上述したものと同じである。ネットワークで結ばれたグリッドの隣接したセンサタイル2を用いて、フレキシブルタッチ層38はグリッドのセンサタイルにおけるすべてのセンタタイル2を覆った、(例えば5ミルのポリエステルなどの)単一の途切れのない薄いシート材料から構成される。これは異なる隣接するセンサタイルのアクティブセンシング層における隣接するセンシング素子の機械的な補間処理は各個々のセンサタイル内の隣接するセンシング素子の機械的な補間処理と同一である、という利点を有する。ユーザの観点からの効果は、図10で上述されて図示されたように、タッチ応答を補間することは単一の極めて大きなセンサタイルのタッチ応答を補間することと正確に等しい、ということである。同様に、ホストコンピュータ3は、一度それがタイルトポロジーテーブルから画像を再構築すると、あたかもそれが単一の大きなセンサからくるかのようにグリッドのタイルから画像を処理することができる。
他の実施形態では、センシング装置1は、展開可能な表面、すなわち例えば図105に図示された円筒もしくは図106に図示された円錐のプロファイル図などの歪みなしの平面上にぴったりと付けられた表面上に適合するように作られてもよい。特に、展開可能な表面はゼロのガウスの曲率を有する。
センサは長方形でないプレートを用いて構成されてもよい。例えば、一実施形態では、図113に図示されたような六角形のプレート行列39及び図114に図示されたような対応する六角形の突起部行列43が使用されてもよい。
リアルタイムレンジ画像カメラ100を介するジェスチャセンシングは以下の所望の特性を有する。すなわち、(1)ジェスチャをトラッキングするための能力、及び(2)各ユーザの各手の各指もしくは各足の各部分または各ユーザの各足の各部分の時間にわたって一貫した同一性を保持するための能力である。しかし、レンジ画像カメラ100は高品質検出されたタッチ111を提供することができない一方で、典型的には比較的に低フレームレートで動作する。
タッチレンジフュージョン装置104は、例えば圧力画像装置1などのタッチデバイス101及び1つもしくはそれ以上のレンジ画像カメラ100デバイスから構成される。圧力画像装置1は、圧力タイル2にわたって連続的な圧力画像を提供するようにシームレスに隣接されたモジュールの長方形の圧力タイル2から作られる。圧力画像装置1は種々のサイズで形成される。3つの実施形態は、12.5インチ×17インチのフォームファクタを有する小さなデバイス、25インチ×34インチのフォームファクタを有する中間のデバイス、及び50インチ×68インチのフォームファクタを有する大きなデバイスを含む。
レンジ画像カメラ100のデータを用いて、指先、手のひら、足の部分、ペン及びオブジェクトが例えば特許文献2及び非特許文献1,2,3,4,5,14,15,22などのイメージ分析処理アルゴリズムを用いてもしくは従来技術において標準的である任意の他のイメージ分析処理を用いて識別される。最初に、特徴抽出がレンジ画像カメラ100からのデータ上で実行される。これが可能であればライン(線)、エッジ(端)、リッジ、角、ブロブ及びポイント(点)を含む形状についての情報を抽出するためにRGBカメラ103から補足情報とともに実行される。3次元形状認識は高信頼情報を特徴認識に提供する。この情報は、機械学習アルゴリズムに対してパスされ、種々の刺激に対してトレーニングされて手の骨格の特徴、指先、足の形状、ペン及びオブジェクトを識別する。一旦オブジェクトが識別されてしまうと、オブジェクト特徴の3次元空間における位置がタグ付けされる。各特徴の同一性及びxyzの位置は、所定のオブジェクトもしくは特徴が圧力画像装置1もしくは他のタッチデバイス101上にブロブをトラッキングするときにパッドと接触するかどうかを決定するために使用される。
1つのケースでは、オブジェクトが圧力画像装置1をタッチすると、圧力のアンチエイリアジングされた画像が与えられる。この圧力画像は、指先、ペンもしくはオブジェクトの重心107を見つけるために使用される。各重心107は、完全な圧力画像装置1にわたって連続的にトラッキングされる。この正確な重心107データは、上述されたレンジ画像カメラ100データから得られたオブジェクトの同一性と一緒に使用されてその指もしくはオブジェクトが表面との接触を失うときでさえも持続することができる同一性を各重心107に与える。圧力画像装置の代わりに、必ずしも圧力をトラッキングする必要はないのだが、表面上の各検出されたタッチ111の重心107をトラッキングするタッチデバイス101が使用される。
個々のユーザ109間を区別することが複数の参加者が同時に空間を使用している場合により大きなフォームファクタにおいて重要となる。各個々のユーザ109は腕の入口位置、腕の角度並びにそれらの腕及び手が可視領域の周りを移動するような個々のユーザ109の連続的なトラッキングを見ることによって識別される。同様に、各個々のユーザ109は、彼らがタッチデバイス101の床面上を歩き回るように各参加者の体、脚及び足の位置及び方位を絶えずトラッキングすることによって識別される。足もしくは手及びスタイラスのそれぞれがタッチデバイス101にわたって移動するにつれて、その個々のユーザ109の識別は保持される。
レンジ画像100とタッチデバイス101とをフュージョンすることによって利用可能な新しいユニークなジェスチャに加えて、レンジ画像カメラ100及びタッチデバイス101に対する既存のジェスチャがまたサポートされる。アプリケーションサポートソフトウェアはアクション及びキーストロークに対するデバイス上で実行されるジェスチャをコンピュータ上にマッピングする。制御パネルと一緒に、この技術がサポートするアプリケーション及びプラグインは、楽器エミュレーション、疑似手術、疑似絵画(ペインティング)/彫刻、運動競技ゲーム、及びまさに体の動きだけでなく重量及びバランスにおけるシフトにもまた依存するアクティビティを含み、アイソトニック(等張性)の制御とアイソメトリック(等尺性)の制御との組み合わせを必要とする他のアプリケーションは、十分な能力に達するように実装される。
インタラクティブ(双方向性の)ホワイトボード:このセクタに対するフューチャーソースコンサルティング社(Futuresource Consulting, Ltd.)の市場レポートによれば、教育部門(セクター)での販売がほとんどであるが、2009年に750,000個が販売され、2010年に900,000個のインタラクティブホワイトボードが販売された。典型的なインタラクティブホワイトボードは、(例えば6インチ×4インチなどの)大きなタッチデバイス101上に表示するショートスロープロジェクタを備える。これらの大きなフォーマットタッチデバイス101に対する現在のモデルは、ユーザ検出されたタッチ111及びジェスチャをトラッキングするための視野計と一緒に光学カメラのセットを利用する。そのアプローチは制限されたマルチタッチ及びマルチユーザサポートを提供することができる一方で、それは検出されたタッチ111のユーザ、手もしくは指を識別することはできない。さらに、動作がカメラパス内の複数の手の存在によって塞がれるかもしれない。ロバストなハンドアクショントラッキング及び圧力の追加された次元から達成可能な著しくより大きなジェスチャボキャブラリを超えて、センサフュージョンアプローチがまた、ロバストなボードにおける複数の生徒のインタラクション及びコラボレーションに対する教育の必要性に注意を向けさせた。
レンジ画像カメラ(RIC)100:3次元におけるポイントである、特定の点からシーンにおける点までの距離を示す2次元画像を発生する。例えばステレオトライアンギュレーション、シートオブライトトライアンギュレーション、構造化光、タイムオブフライト、インターフェロメトリィ、コード化されたアパーチャなどの十分に確立された技術を用いて商業的に利用可能な多数のタイプのレンジ画像カメラ100が存在する。一実施形態では、マイクロソフトキネクト周辺機器はレンジ画像カメラ100として使用される。キネクトはプライムセンスレンジ画像カメラ100を含む。例えばオープンシーブィ(OpenCV)などのキネクトにおけるこのカメラに利用するために入手可能なオープンソースAPIだけでなくマイクロソフトキネクトAPIもまた存在する。キネクトはまた、本発明と一緒に使用されるRGBカメラ103を有する一方で、RGBカメラ103は本発明において必要とされる部品として使用されない。キネクトの実施形態では、標準的なUSBケーブル9が存在する。図124は、IRカメラ106、RGBカメラ103及びUSBケーブル9を有するレンジ画像カメラ100を図示する。
図127は、タッチデバイス101、例えばユーザの左手118及び右手121などのレンジ画像カメラ100の物理的なオブジェクト102を有するテーブルトップ実施形態を図示する。
図129は、タッチデバイス101、レンジ画像カメラ100、タッチデバイス101からコンピュータ3までのUSBケーブル9、レンジ画像カメラ100からコンピュータ9までのUSBケーブル9及びコンピュータ3の実施形態を図示する。
例えば特許文献2及び非特許文献1、非特許文献2、非特許文献3、非特許文献4、非特許文献5、非特許文献14、非特許文献15、非特許文献22などのレンジ画像カメラ100データに対する画像分析処理を用いて、又は従来技術において標準的である任意の他の画像分析処理を用いて、シーンにおけるオブジェクトが識別され、モデル対応を知るためにマッピングされ、3次元空間においてトラッキングされてもよい。
例えば手、体、ペン、ボール、シリンダー、ハンマー、もしくは本発明を利用するアプリケーションに適切な任意の他のオブジェクトなどの複数の識別可能なオブジェクトモデルは、既知のタイプの利用可能なデータとして格納される。このデータは、オブジェクトタイプのみならずこのオブジェクトタイプに対して一連の関節112及びそのモデルに対する一連のトラッカブルコンタクト(追跡可能な接触)ポイント110を含む幾何学的な骨格モデルもまた識別するために必要である任意のデータを含む。例えばハンドオブジェクトモデル105において、関節112は、手首と個々の指の関節112を含むであろう一方で、接触ポイントは指先を含むであろう。ここでの目的のために、モデルタイプはTiとして定義される。例えば、T1は手に対するモデルタイプを示してもよく、T2はペンに対するモデルタイプを示してもよい、など。3次元空間におけるこの識別、マッピング及びトラッキングは、例えば特許文献2及び非特許文献1、非特許文献2、非特許文献3、非特許文献4、非特許文献5、非特許文献14、非特許文献15、非特許文献22などの画像分析処理を利用して、もしくは従来技術において標準的である任意の他の画像分析処理を用いて得られる。
・モデルタイプTi
・任意の時点において:
〇グローバル座標における各接合部112Jjnに対する3次元の位置のセット(*)
〇各コンタクトポイント110Cjmに対する3次元位置のセット
〇各コンタクトポイント110Cjmに対する閉塞ブール値のセットであって、そのコンタクトポイント110はレンジ画像カメラ100から現在目に見えるかどうかを示す。
(*)−別のセクションで説明したように、すべての位置はシーンに対するグローバル座標系に対してマッピングされる。
・任意の時点において:
〇3次元グローバル座標に対してマッピングされたタッチの2次元位置(*)
〇圧力画像装置1のケースでのタッチの圧力値
・レンジ画像カメラ100のデータから得られた、時間tにおけるシーンにおけるオブジェクト成分{Ej}の新しい状態(ステート)を得る。
〇この時間ステップにおけるシーンに対して最初に導入された各新しい成分Ejに対して、
・その成分の各コンタクトポイント110Cjmに対して、
・そのコンタクトポイント110と関連する検出されたタッチ111には何も設定しない。
・タッチシステムから時間tにおいて検出されたタッチ111{Pk}の新しい状態を得る。
〇この時間ステップにおいて最初に導入された各新しい検出されたタッチ111Pkに対して、
・その検出されたタッチ111と関連するコンタクトポイント110には何も設定しない。
〇この時間ステップではもはやアクティブとならなかった各検出されたタッチ111Pkに対して、
・もしこの検出されたタッチ111と関連するコンタクトポイント110Cjmが存在すれば、
・Cjmと関連する検出されたタッチ111には何も設定しない。
・一連の検出されたタッチ111からこの検出されたタッチ111Pkを取り除く。
〇コンタクトポイント110と関連する検出されたタッチ111を有さず、かつ現在は塞がれていない各コンタクトポイント110Cjmに対して、
・コンタクトポイント110Cjmのグローバル座標におけるそれぞれの位置と、検出されたタッチ111Pkのグローバル座標におけるそれぞれの位置との間のユークリッドの距離dを計算する。
・もしdがそのコンタクトポイント110Cjmに対するコンタクト半径よりも小さければ、
・CjmをPkと関連付ける。
・PkをCjmと関連付ける。
(**)計算された関連付けと一緒であるデータ{Ej}、{Cjm}、{Jjn}及び{Pj}は、例えば代わりにアプリケーションでの使用に利用可能とされる非特許文献25などにおけるより高レベルのジェスチャを抽出するであろう例えばジェスチャ統合もしくはジェスチャ分析などのさらなる分析に対してより高レベルのシステムに対して提供されてもよい。図135は、コンピュータ3に接続されたレンジ画像カメラ101及びタッチデバイス102を図示するブロック図を図示する。上述したアルゴリズムを用いて、成分データ{Ej}は成分データ123のためのコンピュータメモリに格納され、検出されたタッチデータは検出されたタッチデータ124のためのコンピュータメモリに格納される。
大きな複数のユーザ109の表面にわたって、ハンドジェスチャ及びハンド/指の識別のみならず足ジェスチャ及び足/足指の識別についての高品質の意味データを、位置、正確な時間、及び圧力画像装置1の場合には表面上の各検出されたタッチ111の圧力についての数値的に高品質な情報と合成させてこのデータをAPIにおいて利用可能とさせる能力によって、従来は達成不可能であった新しい種類のインタラクティブヒューマン/コンピュータインターフェースアプリケーションを可能とさせるであろう。
テーブルトップハンドジェスチャトラッキングに対して適切であろう一実施形態では、タッチデバイス101から6インチ離れて埋め込まれたカメラを有する、例えば3度などの狭い角度で12インチ×18インチのタッチデバイス上に向けられたレンジ画像カメラ100から構成されるであろう。
タッチレンジフュージョン装置104に対するいくつかの実用性について以下に説明する。
Claims (52)
- コンピュータと、上記コンピュータと通信する1つもしくはそれ以上の個々のセンシングタイルとを備えたセンシングするための装置であって、
上記1つもしくはそれ以上の個々のセンシングタイルは、表面に対して印加された応力を検出し、上記応力に対応する信号を、上記信号から上記表面に印加された応力の時間的に変動する連続的な画像を発生する上記コンピュータに提供するセンサ表面を形成し、
上記表面は隣接し、検出された応力は表面上に幾何学的に隣接しかつシームレスであるような方法でセンシングされる装置。 - 交点及び配線間の空間の領域を定義するグリッドの配線と、
上記グリッドの配線の複数の交点と接触する一連の突起部と、
外側層の外面上への応力が突起部を介して上記突起部から上記交点に伝達されるように、上記一連の突起部上に配置された上記外側層と、
プロンプト信号を上記グリッドに送信させ、上記グリッドからのデータ信号に基づく補間から上記表面上の応力の連続的な位置を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - 上記グリッドの配線の上記複数の交点に近接した応力抵抗材料を含む請求項2記載のセンサ。
- 上記応力抵抗材料は、上記グリッドの配線の上記複数の交点に近接しかつ一定間隔だけに配置される請求項3記載のセンサ。
- データのためのN(3より大きい正の整数)個のデュアルアナログ/デジタルI/OピンとM(3より大きい正の整数)個のデジタルI/Oピンとを有するコンピュータと、
N行及びM列を有する圧力センシングアレイとを備えたセンサであって、
上記I/Oピンは、上記コンピュータの外部の任意のトランジスタもしくは他の切替可能な電子部品を使用することなしに、上記M個のI/Oピンと通信する上記N行及びM列までと通信するセンサ。 - センサのタイルの位置を決定するための方法であって、
上記方法は、
コンピュータからの質問信号を、複数のタイルのそれぞれに上記タイルが電気通信する少なくとも1つの隣接するタイルを識別することを要求する上記コンピュータと通信する少なくとも上記複数のタイルに送信するステップと、
上記コンピュータによって、上記複数のタイルから上記質問に対する応答を受信するステップと、
上記コンピュータによって、上記応答から、相互に相対的な上記複数のタイルの位置の幾何学的なマップを形成するステップとを含む方法。 - センシングするための方法であって、
上記方法は、
表面が隣接する上記表面にわたって移動するオブジェクトから、2つもしくはそれ以上の個々のセンシングタイルから形成されたセンサ表面に印加された応力を検出するステップを含み、
上記検出された応力は、表面上で幾何学的にかつシームレスであるような方法でセンシングされ、
上記方法は、
上記コンピュータと通信する上記タイルからの上記応力に対応する信号を提供するステップと、
上記コンピュータによって、上記信号から上記表面に印加された応力の時間的に変動する連続的な画像を発生するステップとを含む方法。 - 上記方法は、付加的なタイルを上記2つのタイルのうちの少なくとも1つに接続して上記センサ表面のサイズを拡大させるステップを含み、
上記表面は、上記付加的なタイルを含みかつ隣接しており、
上記検出された応力は、表面上で幾何学的に連続的かつシームレスであるような方法でセンシングされる請求項7記載の方法。 - 上記配線間の空間の領域を有するグリッドの配線によって定義された交点まで伝達される機械的な層の最上に対して応力を与えるステップと、
上記グリッドと通信するコンピュータによって、プロンプト信号を上記グリッドに送信させるステップと、
上記コンピュータによって、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の上記応力の連続的な位置を再構築するステップとを含むセンシングするための方法。 - 交点と上記配線間の空間の領域を定義するグリッドの配線と、
上記グリッドの配線の複数の交点と嵌合する一連の突起部と、
外面層の外面に対して与えられた応力が上記外面層に内面を介して上記突起部及び上記複数の交点に伝達するように、上記一連の突起部及び上記外面と並置する上記内面を有する外面層と
プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記外面層の上記外面上の応力のアンチエイリアジングされた画像を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - 上記外面層は、機械的な層であって、
上記一連の突起部は上記グリッドの配線間に配置され、機械的な層である請求項10記載のセンサ。 - 上記グリッドの配線は、上記一連の突起部と上記外面層との間に配置される請求項10記載のセンサ。
- 外面層の内面を介して、一連の突起部及び配線間の空間の領域を有するグリッドの配線によって定義された複数の交点に伝達される、上記外面層の外面に対して応力を与えるステップと、
上記グリッドと通信するコンピュータによって、プロンプト信号を上記グリッドに送信させるステップと、
上記コンピュータによって、上記グリッドから受信されたデータ信号に基づく補間から、上記外面層の上記外面上の上記応力のアンチエイリアジングされた画像を再構築するステップとを含むセンシングするための方法。 - 交点及び配線間の空間の領域を定義するグリッドの配線と、
外面層の外面に対して与えられた応力が上記外面層に内面を介して
突起部に伝達され、上記突起部からそれによって上記外面層と上記突起部との間が圧縮される上記グリッド配線の交点に伝達され、それによって上記突起部は上記交点上へと直接的に与えられた応力を集中させるように、上記グリッドの配線の複数の交点と接触する一連の突起部と上記グリッドの配線及び外面とに接触して配置される内面を有する上記外面層と、
プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記外面層の上記外面上の応力のアンチエイリアジングされた画像を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - 交点及び配線間の空間の領域を定義するグリッドの配線と、
機械的な層の最上に与えられた応力が上記交点を介して伝達され、上記交点から突起部に伝達されるように、上記グリッドの配線の複数の交点と上記グリッドの配線上に配置された複数のプレートを有する層と接触する上記一連の突起部と、
プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の応力の連続的な位置を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - 上記プレート層は、上記複数のプレート上に配置されたフレキシブルタッチ層を含む請求項15記載のセンサ。
- 上記各プレートは、対応する突起部の外面上方で位置合わせされる角を有する請求項16記載のセンサ。
- 交点及び配線間の空間の領域を定義するグリッドの配線と、
上記グリッドの配線の複数の交点と接触する一連の突起部と、
上記グリッドの配線上に配置される複数のプレートを有するプレート層と、
上記プレート層上に配置されたフレキシブルタッチ層とを備えたセンサであって、
上記タッチ層に与えられた応力は、上記プレート層及び少なくとも1つの突起部を介して上記交点に伝達され、
上記センサは、
プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の応力の連続的な位置を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - 交点及び配線間の空間の領域を定義するグリッドの配線と、
上記グリッドの配線の複数の交点と接触する一連の突起部と、
上記グリッドの配線上に配置される複数のプレートを有するプレート層と、
上記プレート層上に配置されたフレキシブルタッチ層とを備えたセンサであって、
上記タッチ層に与えられた応力は、上記プレート層を介して上記交点に伝達され、上記交点から上記突起部に伝達され、
上記センサは、
プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の応力の連続的な位置を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - トップ表面層上へと上方から与えられた応力はプレートに伝達され、上記プレートからグリッド配線の交点に伝達され、上記交点からそれによって上記プレートと突起部との間が圧縮される突起部に伝達され、それによって底面の突起部はセンサ交点上へと直接的に与えられた応力を集中させるように、上記底面から上記グリッドの配線の上記複数の交点と接触する一連の突起部と、上記グリッドの配線の上記複数の交点とトップから接触する一連のプレートと、上記一連のプレート上に配置された上記トップ表面層と、
上記プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の応力の連続的な位置を再構築する、上記センサと通信するコンピュータとを備えたセンサ。 - 上記方法は、
複数の交点の少なくとも1つの交点を介して伝達され、上記交点から上記交点の少なくとも1つのと接触する一連の突起部の少なくとも1つの突起部に伝達される機械的な層の最上に応力を与えるステップとを含み、
上記交点は、グリッドの配線及び上記配線間の空間の領域によって定義され、
上記機械的な層は、上記グリッドの配線上に配置された複数のプレートを有する請求項7記載の方法。 - 上記方法は、
一連の突起部の少なくとも1つの突起部を介して複数の交点の少なくとも1つの交点に伝達される機械的な層の最上に応力を与えるステップとを含み、
上記交点は、グリッドの配線及び上記配線間の空間の領域によって定義され、
上記機械的な層は、上記グリッドの配線上に配置された複数のプレートを有する請求項7記載の方法。 - ベース上に配置されたグリッドの配線の複数の交点と上方から接触する一連の突起部と角においてそれらの底面から接触する一連のプレートと、
上記一連のプレート上に配置されたトップ表面層とを備えたセンサであって、
上記トップ表面層上へと上方から与えられた応力は上記プレートに伝達され、上記プレートから上記突起部に伝達され、上記突起部からそれによって上記ベースと上記突起部との間が圧縮される上記グリッドの交点に伝達され、
上記上方の突起部は、それによって上記交点上へと直接的に与えられた応力を集中させ、
上記センサは、
上記プロンプト信号を上記グリッドに送信させて、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の応力の連続的な位置を再構築する、上記グリッドと通信するコンピュータとを備えたセンサ。 - 上記交点において配置されたFSRを含む請求項23記載のセンサ。
- 応力が上記表面層に与えられたときに、各突起部は対応するセンシング素子と接触するように位置合わせされる請求項24記載のセンサ。
- 上記突起部と上記グリッドとの間、上記表面層と上記一連のプレートとの間及び上記グリッドと上記ベースとの間に配置された接着剤を含む請求項25記載のセンサ。
- 上記各プレートは、上記角が上記隣接するセンシング素子の内側で位置合わせされるように位置決めされる請求項26記載のセンサ。
- 上記プレートは、上記プレート間に隙間が存在し、上記プレートの角間の隙間の中心がセンシング素子に対応するように位置合わせされるように特別に位置合わせされる請求項27記載のセンサ。
- 上記各突起部は、樹脂、金属、木もしくはガラスの剛体バンプであって、応力を上記対応するセンシング素子上に集中させ、上記対応するセンシング素子と接触する形状を有する各突起部は、上記対応するセンシング素子上もしくは内側に正確に位置する請求項28記載のセンサ。
- 上記突起部は、上記プレート間の隙間を介して上記プレートと同一平面で続いている請求項28記載のセンサ。
- 上記突起部は、上記プレートと上記プレートとの交点から生じる請求項28記載のセンサ。
- センシングするための方法であって、
上記方法は、
一連のプレートに伝達され、上記プレートからから一連の突起部に伝達され、上記突起部からそれによってベースと突起部との間が圧縮されるグリッドの配線の複数の交点に伝達されるトップ表面層上へ上方から応力を与えるステップとを含み、
上記一連のプレートは、上記ベース上に配置された上記グリッドの配線の上記複数の交点と上方から接触する上記一連の突起部とそれらの角でそれらの底面から接触し、それによって上方の上記突起部は、上記交点上へと直接的に与えられた応力を集中させ、
上記方法は、
上記グリッドと通信するコンピュータによって、プロンプト信号を上記グリッドに送信させるステップと、
上記コンピュータによって、上記グリッドから受信されたデータ信号に基づく補間から、上記表面上の応力の連続的な位置を再構築するステップとを含む方法。 - コンピュータ内に情報を入力するための装置であって、
上記装置は、
3次元情報をセンシングして3次元出力を発生する3次元センサと、
2次元情報をセンシングして2次元出力を発生する2次元センサと、
上記2次元出力及び上記3次元出力を受信し、上記2次元出力及び上記3次元出力の関数である合成された出力を発生する処理ユニットとを備えた装置。 - オブジェクトが3次元及び2次元において識別されてトラッキングされる請求項33記載の装置。
- 指、手、足、人々、ペン及び他のオブジェクトが3次元及び2次元において識別されてトラッキングされる請求項34記載の装置。
- 上記各オブジェクトの同一性は時間にわたって保持される請求項35記載の装置。
- 上記3次元センサからの上記オブジェクトの同一性は、上記2次元センサからのオブジェクトとペアを構成する請求項36記載の装置。
- 上記2次元センサは上記表面上の接触をセンシングする請求項37記載の装置。
- 上記2次元センサは印加された応力をセンシングする請求項38記載の装置。
- 上記2次元センサは、圧力画像センサを含む請求項39記載の装置。
- 上記3次元センサは、レンジ画像カメラを含む請求項40記載の装置。
- 上記3次元センサは、IR深度カメラを含む請求項41記載の装置。
- 上記3次元センサは、RGBカメラを含む請求項41記載の装置。
- コンピュータ内に情報を入力するための方法であって、
上記方法は、
3次元情報をセンシングする3次元センサによって3次元出力を発生するステップと、
2次元情報をセンシングする2次元センサによって2次元出力を発生するステップと、
上記2次元情報及び上記3次元情報の関数である処理ユニットによって合成された出力を発生するステップとを含む方法。 - 上記3次元センサ及び上記2次元センサによって、3次元及び2次元においてオブジェクトを識別してトラッキングするステップを含む請求項44記載の方法。
- 3次元及び2次元において指、手、足、人々、ペンもしくは他のオブジェクトを識別してトラッキングするステップを含む請求項45記載の方法。
- 上記各オブジェクトの同一性を時間にわたって保持するステップを含む請求項46記載の方法。
- 上記処理ユニットによって、上記3次元センサからの上記オブジェクトの同一性を上記2次元センサからのオブジェクトとペアを構成するステップを含む請求項47記載の方法。
- 上記2次元センサはその表面上の接触をセンシングするステップを含む請求項48記載の方法。
- 上記2次元センサはその表面上の印加された応力をセンシングするステップを含む請求項49記載の方法。
- 上記2次元センサは、圧力画像センサを含む請求項50記載の方法。
- 上記3次元センサは、レンジ画像カメラを含む請求項50記載の方法。
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US40489710P | 2010-10-12 | 2010-10-12 | |
US61/404,897 | 2010-10-12 | ||
US201161462789P | 2011-02-08 | 2011-02-08 | |
US61/462,789 | 2011-02-08 | ||
US201161572642P | 2011-07-19 | 2011-07-19 | |
US61/572,642 | 2011-07-19 | ||
US201161572938P | 2011-07-25 | 2011-07-25 | |
US61/572,938 | 2011-07-25 | ||
PCT/US2011/001739 WO2012050606A2 (en) | 2010-10-12 | 2011-10-11 | Apparatus for sensing utilizing tiles, sensor having a set of plates, object identification for multi-touch surfaces, and method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013542523A true JP2013542523A (ja) | 2013-11-21 |
JP6021812B2 JP6021812B2 (ja) | 2016-11-09 |
Family
ID=45924749
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013533841A Active JP6021812B2 (ja) | 2010-10-12 | 2011-10-11 | タイルを利用してセンシングするための装置、一連のプレートを有するセンサ、マルチタッチ表面のためのオブジェクト識別及び方法 |
Country Status (6)
Country | Link |
---|---|
US (10) | US9317154B2 (ja) |
EP (1) | EP2628069B1 (ja) |
JP (1) | JP6021812B2 (ja) |
CN (1) | CN103154867B (ja) |
CA (1) | CA2814183C (ja) |
WO (1) | WO2012050606A2 (ja) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016102756A (ja) * | 2014-11-28 | 2016-06-02 | 凸版印刷株式会社 | 感圧センサ |
CN107077240A (zh) * | 2014-06-25 | 2017-08-18 | 森赛尔股份有限公司 | 触觉触摸传感器系统和方法 |
JP2018009820A (ja) * | 2016-07-11 | 2018-01-18 | 東京電力ホールディングス株式会社 | 構造物の歪センサ及び構造物歪検出方法 |
WO2019187653A1 (ja) * | 2018-03-26 | 2019-10-03 | 住友理工株式会社 | トランスデューサシート |
JP2019184300A (ja) * | 2018-04-04 | 2019-10-24 | Nissha株式会社 | タイル状センサ |
US11068118B2 (en) | 2013-09-27 | 2021-07-20 | Sensel, Inc. | Touch sensor detector system and method |
US11221706B2 (en) | 2013-09-27 | 2022-01-11 | Sensel, Inc. | Tactile touch sensor system and method |
JP7510983B2 (ja) | 2016-09-13 | 2024-07-04 | アップル インコーポレイテッド | 力感知及び触覚フィードバックを伴うキーレスキーボード |
US12079043B2 (en) | 2017-07-26 | 2024-09-03 | Apple Inc. | Computer with keyboard |
Families Citing this family (210)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SE533704C2 (sv) | 2008-12-05 | 2010-12-07 | Flatfrog Lab Ab | Pekkänslig apparat och förfarande för drivning av densamma |
US8487759B2 (en) | 2009-09-30 | 2013-07-16 | Apple Inc. | Self adapting haptic device |
TWI471790B (zh) * | 2010-02-03 | 2015-02-01 | Wintek Corp | 電容式觸控感應器及其製造方法及電容式觸控面板 |
DE102011006344B4 (de) | 2010-03-31 | 2020-03-12 | Joyson Safety Systems Acquisition Llc | Insassenmesssystem |
JP5805974B2 (ja) | 2010-03-31 | 2015-11-10 | ティーケー ホールディングス,インコーポレーテッド | ステアリングホイールセンサ |
DE102011006649B4 (de) | 2010-04-02 | 2018-05-03 | Tk Holdings Inc. | Lenkrad mit Handsensoren |
US9158369B2 (en) * | 2010-10-12 | 2015-10-13 | Tactonic Technologies, Llc | Sensors having a connecting frame and method for composite sensors |
CN103154867B (zh) * | 2010-10-12 | 2017-09-22 | 纽约大学 | 用于传感利用瓷片、具有一组板的传感器和多点触摸表面目标识别的装置和方法 |
US20120179994A1 (en) * | 2011-01-12 | 2012-07-12 | Smart Technologies Ulc | Method for manipulating a toolbar on an interactive input system and interactive input system executing the method |
US8711113B2 (en) | 2011-02-07 | 2014-04-29 | 3M Innovative Properties Company | Modular connector for touch sensitive device |
US8938101B2 (en) * | 2011-04-26 | 2015-01-20 | Sony Computer Entertainment America Llc | Apparatus, system, and method for real-time identification of finger impressions for multiple users |
US9372588B2 (en) | 2011-05-19 | 2016-06-21 | Microsoft Technology Licensing, Llc | Pressure-sensitive multi-touch device |
US9628843B2 (en) * | 2011-11-21 | 2017-04-18 | Microsoft Technology Licensing, Llc | Methods for controlling electronic devices using gestures |
KR101535823B1 (ko) * | 2011-12-15 | 2015-07-13 | 엘지디스플레이 주식회사 | 터치 및 입체 영상 표시 기능을 갖는 액정표시장치 및 그의 제조 방법 |
WO2013154720A1 (en) | 2012-04-13 | 2013-10-17 | Tk Holdings Inc. | Pressure sensor including a pressure sensitive material for use with control systems and methods of using the same |
US20130285919A1 (en) * | 2012-04-25 | 2013-10-31 | Sony Computer Entertainment Inc. | Interactive video system |
US10168835B2 (en) | 2012-05-23 | 2019-01-01 | Flatfrog Laboratories Ab | Spatial resolution in touch displays |
US10321873B2 (en) | 2013-09-17 | 2019-06-18 | Medibotics Llc | Smart clothing for ambulatory human motion capture |
US10602965B2 (en) | 2013-09-17 | 2020-03-31 | Medibotics | Wearable deformable conductive sensors for human motion capture including trans-joint pitch, yaw, and roll |
US9588582B2 (en) | 2013-09-17 | 2017-03-07 | Medibotics Llc | Motion recognition clothing (TM) with two different sets of tubes spanning a body joint |
US10716510B2 (en) | 2013-09-17 | 2020-07-21 | Medibotics | Smart clothing with converging/diverging bend or stretch sensors for measuring body motion or configuration |
US9582072B2 (en) | 2013-09-17 | 2017-02-28 | Medibotics Llc | Motion recognition clothing [TM] with flexible electromagnetic, light, or sonic energy pathways |
US9213436B2 (en) * | 2012-06-20 | 2015-12-15 | Amazon Technologies, Inc. | Fingertip location for gesture input |
US9400575B1 (en) | 2012-06-20 | 2016-07-26 | Amazon Technologies, Inc. | Finger detection for element selection |
US9487388B2 (en) | 2012-06-21 | 2016-11-08 | Nextinput, Inc. | Ruggedized MEMS force die |
WO2014008377A1 (en) | 2012-07-05 | 2014-01-09 | Ian Campbell | Microelectromechanical load sensor and methods of manufacturing the same |
JP5224203B1 (ja) | 2012-07-11 | 2013-07-03 | 大日本印刷株式会社 | タッチパネルセンサ、タッチパネル装置および表示装置 |
US10527505B2 (en) * | 2012-07-27 | 2020-01-07 | Tactonic Technologies, Llc | Method for mechanical sensing utilizing controlled current |
CN103576960A (zh) * | 2012-08-02 | 2014-02-12 | 深圳纽迪瑞科技开发有限公司 | 触摸屏压力、位置感应方法及感应元件和电子触摸设备 |
DE112013004512T5 (de) | 2012-09-17 | 2015-06-03 | Tk Holdings Inc. | Einzelschicht-Kraftsensor |
US9268407B1 (en) * | 2012-10-10 | 2016-02-23 | Amazon Technologies, Inc. | Interface elements for managing gesture control |
US9164607B2 (en) | 2012-11-30 | 2015-10-20 | 3M Innovative Properties Company | Complementary touch panel electrodes |
GB2508626B (en) * | 2012-12-05 | 2014-10-29 | R & D Core Ltd | Contact sensor |
US10817096B2 (en) | 2014-02-06 | 2020-10-27 | Apple Inc. | Force sensor incorporated into display |
WO2014092758A1 (en) | 2012-12-14 | 2014-06-19 | Changello Enterprise Llc | Force sensing through capacitance changes |
GB201223230D0 (en) * | 2012-12-21 | 2013-02-06 | R & D Core Ltd | Contact sensor |
WO2014117728A1 (zh) * | 2013-01-30 | 2014-08-07 | 福建科创光电有限公司 | 单片式电容触摸屏及其制作方法 |
WO2014124173A1 (en) | 2013-02-08 | 2014-08-14 | Changello Enterprise Llc | Force determination based on capacitive sensing |
US20140237401A1 (en) * | 2013-02-15 | 2014-08-21 | Flatfrog Laboratories Ab | Interpretation of a gesture on a touch sensing device |
US9046946B2 (en) * | 2013-03-01 | 2015-06-02 | Blackberry Limited | System and method of determining stylus location on touch-sensitive display |
US20140282269A1 (en) * | 2013-03-13 | 2014-09-18 | Amazon Technologies, Inc. | Non-occluded display for hover interactions |
US9851828B2 (en) | 2013-03-15 | 2017-12-26 | Apple Inc. | Touch force deflection sensor |
ITMO20130067A1 (it) | 2013-03-15 | 2014-09-16 | Claudio Lucchese | Substrato per la realizzazione di una pavimentazione sensibile e un metodo di rilevamento e visualizzazione in continuo di carichi sul substrato |
US10019113B2 (en) | 2013-04-11 | 2018-07-10 | Flatfrog Laboratories Ab | Tomographic processing for touch detection |
CN105122196B (zh) * | 2013-04-18 | 2018-02-06 | 夏普株式会社 | 传感片、传感片组件、触摸传感面板组件和电子设备 |
WO2015005847A1 (en) | 2013-07-12 | 2015-01-15 | Flatfrog Laboratories Ab | Partial detect mode |
US9671889B1 (en) | 2013-07-25 | 2017-06-06 | Apple Inc. | Input member with capacitive sensor |
WO2015022940A1 (ja) | 2013-08-16 | 2015-02-19 | 株式会社ワコム | 指示体検出装置及び指示体検出方法 |
WO2015022938A1 (ja) * | 2013-08-16 | 2015-02-19 | 株式会社ワコム | 指示体検出センサ及び指示体検出装置 |
KR101654040B1 (ko) * | 2013-09-10 | 2016-09-05 | 주식회사 케이티 | 사용자의 스텝 패턴 입력을 이용하는 전자 기기의 자동 설정 장치, 자동 설정 시스템 및 전자 기기의 자동 설정 방법 |
US9465490B2 (en) | 2013-09-19 | 2016-10-11 | Atmel Corporation | Curved surface sensor pattern |
US10324563B2 (en) | 2013-09-24 | 2019-06-18 | Hewlett-Packard Development Company, L.P. | Identifying a target touch region of a touch-sensitive surface based on an image |
US10013092B2 (en) | 2013-09-27 | 2018-07-03 | Sensel, Inc. | Tactile touch sensor system and method |
EP3049902B1 (en) * | 2013-09-27 | 2020-11-18 | Sensel, Inc. | Capacitive touch sensor system and method |
CN105683865B (zh) | 2013-09-30 | 2018-11-09 | 苹果公司 | 用于触觉响应的磁性致动器 |
US9317118B2 (en) | 2013-10-22 | 2016-04-19 | Apple Inc. | Touch surface for simulating materials |
KR101580637B1 (ko) | 2013-10-28 | 2015-12-28 | 주식회사 케이티 | 엘리베이터 보안 시스템 |
KR20160048424A (ko) * | 2014-10-24 | 2016-05-04 | 주식회사 하이딥 | 터치 입력 장치 |
US10276001B2 (en) | 2013-12-10 | 2019-04-30 | Apple Inc. | Band attachment mechanism with haptic response |
WO2015106246A1 (en) | 2014-01-13 | 2015-07-16 | Nextinput, Inc. | Miniaturized and ruggedized wafer level mems force sensors |
US10146376B2 (en) | 2014-01-16 | 2018-12-04 | Flatfrog Laboratories Ab | Light coupling in TIR-based optical touch systems |
US10126882B2 (en) | 2014-01-16 | 2018-11-13 | Flatfrog Laboratories Ab | TIR-based optical touch systems of projection-type |
WO2015123322A1 (en) | 2014-02-12 | 2015-08-20 | Apple Inc. | Force determination employing sheet sensor and capacitive array |
WO2015121875A2 (en) * | 2014-02-17 | 2015-08-20 | Dasari Vamshi Nag | A system and method for improving capabilities of security system integrated with premises |
US10335091B2 (en) * | 2014-03-19 | 2019-07-02 | Tactonic Technologies, Llc | Method and apparatus to infer object and agent properties, activity capacities, behaviors, and intents from contact and pressure images |
CN103973975B (zh) * | 2014-04-10 | 2017-11-07 | 北京智谷睿拓技术服务有限公司 | 交互方法、装置及用户设备 |
DE112014006608B4 (de) * | 2014-04-21 | 2024-01-25 | Apple Inc. | Verfahren, Systeme und elektronische Vorrichtungen zum Bestimmen der Kräfteaufteilung für Multi-Touch-Eingabevorrichtungen elektronischer Vorrichtungen |
US9849377B2 (en) * | 2014-04-21 | 2017-12-26 | Qatar University | Plug and play tangible user interface system |
US10198123B2 (en) | 2014-04-21 | 2019-02-05 | Apple Inc. | Mitigating noise in capacitive sensor |
DE102014006690A1 (de) * | 2014-05-09 | 2015-11-12 | Otto Bock Healthcare Gmbh | Verfahren zur Feststellung der Ausrichtung eines Systems und Anzeigesystem |
US9171533B1 (en) * | 2014-06-10 | 2015-10-27 | Angel Cuayo | Band driven electronic organ |
US10490052B2 (en) | 2014-06-16 | 2019-11-26 | Seda Chemical Products Co., Ltd. | Motion-sensing floor mat, motion-sensing floor mat assembly, and monitoring system with the same floor mats |
TW201601122A (zh) * | 2014-06-16 | 2016-01-01 | Seda Chemical Products Co Ltd | 活動感知地墊之監視系統 |
US11983352B2 (en) * | 2014-06-24 | 2024-05-14 | Tactonic Technologies, Llc | Mechanical force redistribution sensor array embedded in a single support layer |
US20150374297A1 (en) * | 2014-06-27 | 2015-12-31 | Clinical Image Retrieval Systems, Inc. | Modular instrumented floor covering |
EP3161594A4 (en) | 2014-06-27 | 2018-01-17 | FlatFrog Laboratories AB | Detection of surface contamination |
US9482780B2 (en) * | 2014-06-27 | 2016-11-01 | Douglas D. Haas | Modular instrumented floor covering |
EP3195088A2 (en) | 2014-09-02 | 2017-07-26 | Apple Inc. | Haptic notifications |
WO2016048313A1 (en) | 2014-09-24 | 2016-03-31 | Hewlett-Packard Development Company, L.P. | Transforming received touch input |
JP6452369B2 (ja) * | 2014-09-29 | 2019-01-16 | キヤノン株式会社 | 情報処理装置とその制御方法、プログラム、記憶媒体 |
US10282697B1 (en) * | 2014-09-30 | 2019-05-07 | Amazon Technologies, Inc. | Spatially aware mounting system |
US10847469B2 (en) * | 2016-04-26 | 2020-11-24 | Cubic Corporation | CTE compensation for wafer-level and chip-scale packages and assemblies |
US9671896B2 (en) * | 2014-11-18 | 2017-06-06 | Toshiba Tec Kabushiki Kaisha | Interface system, object for operation input, operation input supporting method |
US20160146448A1 (en) * | 2014-11-20 | 2016-05-26 | Ming-Hsiao Ma | Interactive sensing and displaying building assembly |
CN104598067B (zh) * | 2014-12-24 | 2017-12-29 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN105865599A (zh) * | 2015-01-22 | 2016-08-17 | 西安乐食智能餐具有限公司 | 一种称重装置及称重方法 |
US11182023B2 (en) | 2015-01-28 | 2021-11-23 | Flatfrog Laboratories Ab | Dynamic touch quarantine frames |
US10318074B2 (en) | 2015-01-30 | 2019-06-11 | Flatfrog Laboratories Ab | Touch-sensing OLED display with tilted emitters |
US10496227B2 (en) | 2015-02-09 | 2019-12-03 | Flatfrog Laboratories Ab | Optical touch system comprising means for projecting and detecting light beams above and inside a transmissive panel |
US10401546B2 (en) | 2015-03-02 | 2019-09-03 | Flatfrog Laboratories Ab | Optical component for light coupling |
US10006937B2 (en) | 2015-03-06 | 2018-06-26 | Apple Inc. | Capacitive sensors for electronic devices and methods of forming the same |
US10353467B2 (en) | 2015-03-06 | 2019-07-16 | Apple Inc. | Calibration of haptic devices |
AU2016100399B4 (en) | 2015-04-17 | 2017-02-02 | Apple Inc. | Contracting and elongating materials for providing input and output for an electronic device |
US9791979B2 (en) | 2015-04-21 | 2017-10-17 | Dell Products L.P. | Managing inputs at an information handling system by adaptive infrared illumination and detection |
US11106314B2 (en) | 2015-04-21 | 2021-08-31 | Dell Products L.P. | Continuous calibration of an information handling system projected user interface |
US9921644B2 (en) | 2015-04-21 | 2018-03-20 | Dell Products L.P. | Information handling system non-linear user interface |
US10139854B2 (en) | 2015-04-21 | 2018-11-27 | Dell Products L.P. | Dynamic display resolution management for an immersed information handling system environment |
US9690400B2 (en) * | 2015-04-21 | 2017-06-27 | Dell Products L.P. | Information handling system interactive totems |
US9720550B2 (en) | 2015-04-21 | 2017-08-01 | Dell Products L.P. | Adaptable input active zones at an information handling system projected user interface |
US9753591B2 (en) | 2015-04-21 | 2017-09-05 | Dell Products L.P. | Capacitive mat information handling system display and totem interactions |
US9804718B2 (en) | 2015-04-21 | 2017-10-31 | Dell Products L.P. | Context based peripheral management for interacting with an information handling system |
US9804733B2 (en) | 2015-04-21 | 2017-10-31 | Dell Products L.P. | Dynamic cursor focus in a multi-display information handling system environment |
US11243640B2 (en) | 2015-04-21 | 2022-02-08 | Dell Products L.P. | Information handling system modular capacitive mat with extension coupling devices |
US9983717B2 (en) | 2015-04-21 | 2018-05-29 | Dell Products L.P. | Disambiguation of false touch inputs at an information handling system projected user interface |
US9720446B2 (en) | 2015-04-21 | 2017-08-01 | Dell Products L.P. | Information handling system projected work space calibration |
US10248241B2 (en) * | 2015-05-07 | 2019-04-02 | Ricoh Company, Ltd. | Digital signage system |
CN107848788B (zh) | 2015-06-10 | 2023-11-24 | 触控解决方案股份有限公司 | 具有容差沟槽的加固的晶圆级mems力传感器 |
US9715301B2 (en) | 2015-08-04 | 2017-07-25 | Apple Inc. | Proximity edge sensing |
US10566888B2 (en) | 2015-09-08 | 2020-02-18 | Apple Inc. | Linear actuators for use in electronic devices |
WO2017061799A1 (ko) * | 2015-10-06 | 2017-04-13 | 엘지이노텍 주식회사 | 압력 감지 의자 |
CN105589606A (zh) * | 2015-11-17 | 2016-05-18 | 苏州久腾光电科技有限公司 | 带视讯交流功能的交互式电子白板 |
US9733062B2 (en) * | 2015-11-20 | 2017-08-15 | General Electric Company | Systems and methods for monitoring component strain |
EP3387516B1 (en) | 2015-12-09 | 2022-04-20 | FlatFrog Laboratories AB | Improved stylus identification |
US20170185169A1 (en) * | 2015-12-14 | 2017-06-29 | Shaftesbury Tech Inc. | Interactive tile system, tile connectors, and related methods |
KR102456154B1 (ko) | 2016-01-29 | 2022-10-19 | 삼성디스플레이 주식회사 | 센서, 터치 센서 및 표시 장치 |
CN108603799B (zh) * | 2016-02-06 | 2020-09-04 | 深圳纽迪瑞科技开发有限公司 | 压力传感器、电子设备及该压力传感器的制作方法 |
CN108604149B (zh) * | 2016-02-06 | 2021-06-18 | 深圳纽迪瑞科技开发有限公司 | 压力传感器、电子设备及该压力传感器的制作方法 |
US10039080B2 (en) | 2016-03-04 | 2018-07-31 | Apple Inc. | Situationally-aware alerts |
US10268272B2 (en) | 2016-03-31 | 2019-04-23 | Apple Inc. | Dampening mechanical modes of a haptic actuator using a delay |
US10007343B2 (en) | 2016-03-31 | 2018-06-26 | Apple Inc. | Force sensor in an input device |
US11173376B2 (en) * | 2016-04-11 | 2021-11-16 | Brian Janssen | Full scale practice, training and diagnostic system method and software medium including highlighted progression illuminations and field embedded pressure sensors for use by positional players in sole and team-based sports as well as other non-athletic training applications |
CN105890830B (zh) * | 2016-04-29 | 2019-03-05 | 宸盛光电有限公司 | 一种压力感测装置 |
US10809842B2 (en) | 2016-05-26 | 2020-10-20 | Microsoft Technology Licensing, Llc | Active touch input device pairing negotiation |
FR3054358B1 (fr) * | 2016-07-25 | 2018-08-31 | Commissariat Energie Atomique | Procede et systeme de reconstruction de posture par suivi spatial du haut d'un corps et suivi du bas du corps au moyen d'un tapis de detection |
US10239212B2 (en) * | 2016-10-07 | 2019-03-26 | Southern Taiwan University Of Science And Technology | Ultrasonic tactile sensor for detecting clamping force |
US10307669B2 (en) | 2016-10-11 | 2019-06-04 | Valve Corporation | Electronic controller with finger sensing and an adjustable hand retainer |
US10888773B2 (en) | 2016-10-11 | 2021-01-12 | Valve Corporation | Force sensing resistor (FSR) with polyimide substrate, systems, and methods thereof |
US10391400B1 (en) | 2016-10-11 | 2019-08-27 | Valve Corporation | Electronic controller with hand retainer and finger motion sensing |
US10987573B2 (en) | 2016-10-11 | 2021-04-27 | Valve Corporation | Virtual reality hand gesture generation |
US11185763B2 (en) | 2016-10-11 | 2021-11-30 | Valve Corporation | Holding and releasing virtual objects |
US10898797B2 (en) | 2016-10-11 | 2021-01-26 | Valve Corporation | Electronic controller with finger sensing and an adjustable hand retainer |
US11625898B2 (en) | 2016-10-11 | 2023-04-11 | Valve Corporation | Holding and releasing virtual objects |
US10691233B2 (en) | 2016-10-11 | 2020-06-23 | Valve Corporation | Sensor fusion algorithms for a handheld controller that includes a force sensing resistor (FSR) |
US10649583B1 (en) | 2016-10-11 | 2020-05-12 | Valve Corporation | Sensor fusion algorithms for a handheld controller that includes a force sensing resistor (FSR) |
CN107957799B (zh) * | 2016-10-14 | 2021-08-10 | 群创光电股份有限公司 | 触控显示面板 |
US20180118522A1 (en) * | 2016-10-28 | 2018-05-03 | Otis Elevator Company | Sensor on escalator landing plate |
GB2555492B (en) * | 2016-11-01 | 2022-03-02 | Luminary Roli Ltd | User interface device |
US10139973B2 (en) | 2016-11-09 | 2018-11-27 | Dell Products L.P. | Information handling system totem tracking management |
US10146366B2 (en) | 2016-11-09 | 2018-12-04 | Dell Products L.P. | Information handling system capacitive touch totem with optical communication support |
US10139951B2 (en) | 2016-11-09 | 2018-11-27 | Dell Products L.P. | Information handling system variable capacitance totem input management |
US10139930B2 (en) | 2016-11-09 | 2018-11-27 | Dell Products L.P. | Information handling system capacitive touch totem management |
US10496216B2 (en) | 2016-11-09 | 2019-12-03 | Dell Products L.P. | Information handling system capacitive touch totem with optical communication support |
CN110100226A (zh) | 2016-11-24 | 2019-08-06 | 平蛙实验室股份公司 | 触摸信号的自动优化 |
JP2020512607A (ja) * | 2016-12-07 | 2020-04-23 | フラットフロッグ ラボラトリーズ アーベーFlatFrog Laboratories AB | 改良されたタッチ装置 |
US10389935B2 (en) * | 2016-12-13 | 2019-08-20 | Canon Kabushiki Kaisha | Method, system and apparatus for configuring a virtual camera |
KR102674463B1 (ko) * | 2016-12-23 | 2024-06-13 | 현대자동차주식회사 | 차량, 및 그 제어방법 |
US11000193B2 (en) * | 2017-01-04 | 2021-05-11 | Livemetric (Medical) S.A. | Blood pressure measurement system using force resistive sensor array |
WO2018141948A1 (en) | 2017-02-06 | 2018-08-09 | Flatfrog Laboratories Ab | Optical coupling in touch-sensing systems |
US11243125B2 (en) | 2017-02-09 | 2022-02-08 | Nextinput, Inc. | Integrated piezoresistive and piezoelectric fusion force sensor |
US11255737B2 (en) | 2017-02-09 | 2022-02-22 | Nextinput, Inc. | Integrated digital force sensors and related methods of manufacture |
WO2018174788A1 (en) | 2017-03-22 | 2018-09-27 | Flatfrog Laboratories | Object characterisation for touch displays |
WO2018182476A1 (en) | 2017-03-28 | 2018-10-04 | Flatfrog Laboratories Ab | Touch sensing apparatus and method for assembly |
WO2018232375A1 (en) | 2017-06-16 | 2018-12-20 | Valve Corporation | Electronic controller with finger motion sensing |
CN107290084B (zh) * | 2017-06-28 | 2019-08-30 | 京东方科技集团股份有限公司 | 一种压力传感器及其制作方法、电子器件 |
US10622538B2 (en) | 2017-07-18 | 2020-04-14 | Apple Inc. | Techniques for providing a haptic output and sensing a haptic input using a piezoelectric body |
EP3655740A4 (en) | 2017-07-19 | 2021-07-14 | Nextinput, Inc. | STRESS TRANSFER STACKING IN MEMS FORCE SENSOR |
US11423686B2 (en) | 2017-07-25 | 2022-08-23 | Qorvo Us, Inc. | Integrated fingerprint and force sensor |
US11243126B2 (en) | 2017-07-27 | 2022-02-08 | Nextinput, Inc. | Wafer bonded piezoresistive and piezoelectric force sensor and related methods of manufacture |
CN111052058B (zh) | 2017-09-01 | 2023-10-20 | 平蛙实验室股份公司 | 改进的光学部件 |
CN107678589A (zh) * | 2017-09-29 | 2018-02-09 | 上海与德科技有限公司 | 一种基于MicroLED显示屏幕的使用方法及电子设备 |
CN107607031A (zh) * | 2017-10-17 | 2018-01-19 | 广州中国科学院工业技术研究院 | 网状传感器及测量方法 |
WO2019079420A1 (en) | 2017-10-17 | 2019-04-25 | Nextinput, Inc. | SHIFT TEMPERATURE COEFFICIENT COMPENSATION FOR FORCE SENSOR AND STRAIN GAUGE |
JP7010798B2 (ja) * | 2017-10-27 | 2022-01-26 | パラマウントベッド株式会社 | 動画像記録システム |
WO2019090057A1 (en) | 2017-11-02 | 2019-05-09 | Nextinput, Inc. | Sealed force sensor with etch stop layer |
JP2019089166A (ja) * | 2017-11-15 | 2019-06-13 | セイコーエプソン株式会社 | 力検出システムおよびロボット |
WO2019099821A1 (en) | 2017-11-16 | 2019-05-23 | Nextinput, Inc. | Force attenuator for force sensor |
US10459528B2 (en) | 2018-02-28 | 2019-10-29 | Dell Products L.P. | Information handling system enhanced gesture management, control and detection |
US11567610B2 (en) | 2018-03-05 | 2023-01-31 | Flatfrog Laboratories Ab | Detection line broadening |
CN108537220A (zh) * | 2018-03-21 | 2018-09-14 | 李荣陆 | 一种使原平面设计在新尺寸下自动适配的装置 |
US20190291224A1 (en) * | 2018-03-22 | 2019-09-26 | Ford Motor Company | Workpiece alignment system having pressure sensors for assessing alignment of a workpiece with a fixture |
KR102521373B1 (ko) * | 2018-03-29 | 2023-04-13 | 삼성디스플레이 주식회사 | 표시 장치 |
CN112261972B (zh) * | 2018-05-18 | 2024-07-23 | 威尔乌集团 | 用于包含力感测电阻器(fsr)的手持控制器的传感器融合算法 |
CN108845693A (zh) * | 2018-06-04 | 2018-11-20 | 业成科技(成都)有限公司 | 具有辅助线的触控电极 |
US10664101B2 (en) | 2018-06-28 | 2020-05-26 | Dell Products L.P. | Information handling system touch device false touch detection and mitigation |
US10761618B2 (en) | 2018-06-28 | 2020-09-01 | Dell Products L.P. | Information handling system touch device with automatically orienting visual display |
US10635199B2 (en) | 2018-06-28 | 2020-04-28 | Dell Products L.P. | Information handling system dynamic friction touch device for touchscreen interactions |
US10817077B2 (en) | 2018-06-28 | 2020-10-27 | Dell Products, L.P. | Information handling system touch device context aware input tracking |
US10852853B2 (en) | 2018-06-28 | 2020-12-01 | Dell Products L.P. | Information handling system touch device with visually interactive region |
US10795502B2 (en) | 2018-06-28 | 2020-10-06 | Dell Products L.P. | Information handling system touch device with adaptive haptic response |
US10866683B2 (en) | 2018-08-27 | 2020-12-15 | Apple Inc. | Force or touch sensing on a mobile device using capacitive or pressure sensing |
US11182603B1 (en) | 2018-08-31 | 2021-11-23 | Snap Inc. | Weakly supervised semantic parsing |
CN109344718B (zh) * | 2018-09-03 | 2021-02-09 | 先临三维科技股份有限公司 | 指尖识别方法、装置、存储介质及处理器 |
US10691211B2 (en) | 2018-09-28 | 2020-06-23 | Apple Inc. | Button providing force sensing and/or haptic output |
US10599223B1 (en) | 2018-09-28 | 2020-03-24 | Apple Inc. | Button providing force sensing and/or haptic output |
US11022583B2 (en) * | 2018-10-09 | 2021-06-01 | Electric Power Research Institute, Inc. | Apparatus and method for fabricating ultrasonic sensor probes directly on a substrate surface and using same |
WO2020077482A1 (zh) * | 2018-10-15 | 2020-04-23 | 王长贵 | 一种复合瓷砖以及具有它的步态检测系统 |
CN112889016A (zh) | 2018-10-20 | 2021-06-01 | 平蛙实验室股份公司 | 用于触摸敏感装置的框架及其工具 |
US10962427B2 (en) | 2019-01-10 | 2021-03-30 | Nextinput, Inc. | Slotted MEMS force sensor |
WO2020153890A1 (en) | 2019-01-25 | 2020-07-30 | Flatfrog Laboratories Ab | A videoconferencing terminal and method of operating the same |
CN110232321B (zh) * | 2019-05-10 | 2021-07-06 | 奥比中光科技集团股份有限公司 | 指尖点击位置的检测方法、装置、终端及计算机存储介质 |
TWI706308B (zh) * | 2019-06-05 | 2020-10-01 | 大陸商北京集創北方科技股份有限公司 | 觸控平面的重壓處理方法、觸控裝置及資訊處理裝置 |
CN110440975A (zh) * | 2019-08-06 | 2019-11-12 | 厦门大学 | 四足机器人圆形足端球面矢量力检测装置及检测方法 |
US11380470B2 (en) | 2019-09-24 | 2022-07-05 | Apple Inc. | Methods to control force in reluctance actuators based on flux related parameters |
US12056316B2 (en) | 2019-11-25 | 2024-08-06 | Flatfrog Laboratories Ab | Touch-sensing apparatus |
CN111024279B (zh) * | 2019-12-30 | 2022-03-18 | 浙江清华柔性电子技术研究院 | 压力传感器单元及压力传感器 |
KR20220131982A (ko) | 2020-02-10 | 2022-09-29 | 플라트프로그 라보라토리즈 에이비 | 향상된 터치-감지 장치 |
US20210285835A1 (en) * | 2020-03-16 | 2021-09-16 | New York University | Apparatus for Determining Shear Forces in Regard to a Pressure Imaging Array, Single Point Sensor for Shear Forces, and Method |
CN111464419B (zh) * | 2020-04-13 | 2021-08-27 | 中国人民解放军国防科技大学 | 一种基于总线网络通信的数据传输控制方法 |
US20210318782A1 (en) * | 2020-04-13 | 2021-10-14 | Himax Technologies Limited | Apparatus integrated with fingerprint recognition and touch detection |
US11269440B1 (en) * | 2020-08-12 | 2022-03-08 | Universal Cement Corporation | Foldable force sensing device |
CN112043388B (zh) * | 2020-08-14 | 2022-02-01 | 武汉大学 | 一种用于医疗遥操作的触觉人机交互装置 |
CN112035873B (zh) * | 2020-08-18 | 2024-08-23 | 合肥市大数据资产运营有限公司 | 一种时空轨迹数据脱敏方法 |
EP3982096A1 (en) | 2020-10-12 | 2022-04-13 | Basf Se | Sensor element for detecting pressure applied to the sensor element |
EP3988906A1 (en) | 2020-10-22 | 2022-04-27 | InnovationLab GmbH | Sensor element for detecting force applied to the sensor element and pallet comprising such a sensor element for detecting weight and/or weight distribution applied to it |
JP7558054B2 (ja) | 2020-12-24 | 2024-09-30 | 横河電機株式会社 | 力検出器及び力検出システム |
US11977683B2 (en) | 2021-03-12 | 2024-05-07 | Apple Inc. | Modular systems configured to provide localized haptic feedback using inertial actuators |
US11809631B2 (en) | 2021-09-21 | 2023-11-07 | Apple Inc. | Reluctance haptic engine for an electronic device |
LU501704B1 (en) | 2022-03-24 | 2023-09-25 | Innovationlab Gmbh | Electronic Device |
CN115294508B (zh) * | 2022-10-10 | 2023-01-06 | 成都唐米科技有限公司 | 一种基于静态空间三维重构的跟焦方法、系统及摄像系统 |
US11960693B1 (en) * | 2023-05-23 | 2024-04-16 | Rockwell Collins, Inc. | Resistive touch sensor with improved force uniformity |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6222528B1 (en) * | 1997-03-07 | 2001-04-24 | Cirque Corporation | Method and apparatus for data input |
JP2004318200A (ja) * | 2003-04-10 | 2004-11-11 | Vstone Kk | センサシステム、検知情報収集方法、情報伝送システム及び情報伝送方法 |
JP2009109307A (ja) * | 2007-10-30 | 2009-05-21 | Nitta Ind Corp | センサシート |
US20100090299A1 (en) * | 2008-10-15 | 2010-04-15 | Industrial Technology Research Institute | Flexible electronics for pressure device and fabrication method thereof |
JP2010211399A (ja) * | 2009-03-09 | 2010-09-24 | Sony Corp | 情報処理装置、閾値設定方法及びそのプログラム |
JP2010531500A (ja) * | 2007-06-25 | 2010-09-24 | ダヴ | タッチコントロール装置 |
Family Cites Families (81)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5464984A (en) * | 1985-12-11 | 1995-11-07 | General Imaging Corporation | X-ray imaging system and solid state detector therefor |
US5440237A (en) * | 1993-06-01 | 1995-08-08 | Incontrol Solutions, Inc. | Electronic force sensing with sensor normalization |
US5604314A (en) * | 1994-10-26 | 1997-02-18 | Bonneville Scientific Incorporated | Triaxial normal and shear force sensor |
US6216545B1 (en) * | 1995-11-14 | 2001-04-17 | Geoffrey L. Taylor | Piezoresistive foot pressure measurement |
DE19605218C1 (de) * | 1996-02-13 | 1997-04-17 | Dornier Gmbh | Hinderniswarnsystem für tieffliegende Fluggeräte |
US5986221A (en) * | 1996-12-19 | 1999-11-16 | Automotive Systems Laboratory, Inc. | Membrane seat weight sensor |
IL137478A (en) | 1998-01-26 | 2005-11-20 | Westerman Wayne | Method and apparatus for integrating manual input |
US5969440A (en) * | 1998-03-18 | 1999-10-19 | Young; Christopher L. | Push bar with redundant pressure sensors and fail safe mechanical switch |
JP3842006B2 (ja) | 2000-03-30 | 2006-11-08 | グローリー工業株式会社 | 帳票類判別装置、帳票類判別方法、およびこれらの方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
US6861961B2 (en) | 2000-03-30 | 2005-03-01 | Electrotextiles Company Limited | Foldable alpha numeric keyboard |
US6496359B2 (en) * | 2000-12-08 | 2002-12-17 | Sun Microsystems, Inc. | Tile array computers |
JP4424869B2 (ja) * | 2001-03-16 | 2010-03-03 | 浜松ホトニクス株式会社 | 歩幅測定装置 |
US20020149571A1 (en) * | 2001-04-13 | 2002-10-17 | Roberts Jerry B. | Method and apparatus for force-based touch input |
US6715359B2 (en) * | 2001-06-28 | 2004-04-06 | Tactex Controls Inc. | Pressure sensitive surfaces |
US7381152B2 (en) * | 2001-07-23 | 2008-06-03 | Southwest Research Institute | Virtual reality system locomotion interface utilizing a pressure-sensing mat |
CA2353697A1 (en) * | 2001-07-24 | 2003-01-24 | Tactex Controls Inc. | Touch sensitive membrane |
JP4681774B2 (ja) * | 2001-08-30 | 2011-05-11 | キヤノン株式会社 | 撮像素子、その撮像素子を用いた撮像装置、及びその撮像装置を用いた撮像システム |
US6743993B1 (en) * | 2002-02-21 | 2004-06-01 | Advanced Input Devices, Inc. | Backlit full travel key assembly |
US6759264B2 (en) * | 2002-05-17 | 2004-07-06 | Ligh Tuning Technology Inc. | Pressure type fingerprint sensor fabrication method |
US20030218537A1 (en) * | 2002-05-21 | 2003-11-27 | Lightspace Corporation | Interactive modular system |
GB2390949A (en) * | 2002-07-17 | 2004-01-21 | Sony Uk Ltd | Anti-aliasing of a foreground image to be combined with a background image |
US7629967B2 (en) * | 2003-02-14 | 2009-12-08 | Next Holdings Limited | Touch screen signal processing |
TWI220213B (en) * | 2003-03-04 | 2004-08-11 | Darfon Electronics Corp | Keyboard structure |
US20040246473A1 (en) * | 2003-03-18 | 2004-12-09 | Hermary Terrance John | Coded-light dual-view profile scanning apparatus |
US6909373B2 (en) * | 2003-05-09 | 2005-06-21 | Vitrak Wireless Inc. | Floor monitoring system |
US7256768B2 (en) * | 2003-09-16 | 2007-08-14 | Microsoft Corporation | Computer keyboard with quantitatively force-sensing keys |
GB0328163D0 (en) * | 2003-12-04 | 2004-01-07 | Screen Technology Ltd | Display |
CA2560597A1 (en) * | 2004-03-19 | 2005-09-29 | Sports Innovation As | Mat for sport and games |
JP4360542B2 (ja) * | 2004-06-09 | 2009-11-11 | シャープ株式会社 | 画像認証携帯端末装置 |
US7557966B2 (en) * | 2004-08-11 | 2009-07-07 | Acushnet Company | Apparatus and method for scanning an object |
JP4369326B2 (ja) * | 2004-08-19 | 2009-11-18 | 株式会社日立製作所 | 施設内情報提供システム及び施設内情報提供方法 |
US20060044215A1 (en) * | 2004-08-24 | 2006-03-02 | Brody Thomas P | Scalable tiled display assembly for forming a large-area flat-panel display by using modular display tiles |
TWI256009B (en) * | 2004-12-23 | 2006-06-01 | Au Optronics Corp | Illuminating keyboards |
US7482731B2 (en) * | 2005-02-18 | 2009-01-27 | Iptrade, Inc. | Kit and method for constructing vibration suppression and/or sensing units |
US8127623B2 (en) * | 2005-05-18 | 2012-03-06 | Pressure Profile Systems Inc. | Capacitive tactile tile sensor |
US20070003168A1 (en) * | 2005-06-29 | 2007-01-04 | Microsoft Corporation | Computer input device |
US20070171058A1 (en) * | 2005-08-02 | 2007-07-26 | Latitude Broadband, Inc. | Digital flooring detection system |
US20080147350A1 (en) * | 2005-08-29 | 2008-06-19 | Les Atelier Numeriques Inc. | Apparatus, system and methods for collecting position information over a large surface using electrical field sensing devices |
US8564544B2 (en) | 2006-09-06 | 2013-10-22 | Apple Inc. | Touch screen device, method, and graphical user interface for customizing display of content category icons |
CN100583007C (zh) * | 2006-12-21 | 2010-01-20 | 财团法人工业技术研究院 | 具有表面显示信息与互动功能的可动装置 |
US20080180399A1 (en) * | 2007-01-31 | 2008-07-31 | Tung Wan Cheng | Flexible Multi-touch Screen |
KR100934767B1 (ko) * | 2007-09-14 | 2009-12-30 | 한국표준과학연구원 | 모바일 기기용 슬림형 마우스 및 그 제조 방법 |
EP2048642A1 (en) * | 2007-10-10 | 2009-04-15 | Barco NV | Reducing visibility of display errors |
DE102007049323A1 (de) * | 2007-10-15 | 2009-04-23 | Zebris Medical Gmbh | Vorrichtung und Verfahren zur Ganganalyse unter Einsatz eines Laufbandes |
WO2009072435A1 (ja) * | 2007-12-03 | 2009-06-11 | Shimane Prefectural Government | 画像認識装置および画像認識方法 |
US20090237325A1 (en) * | 2007-12-20 | 2009-09-24 | Motorola, Inc. | System for Clustering Displays of Display Devices |
US8692777B2 (en) * | 2008-02-08 | 2014-04-08 | Apple Inc. | Method for rapidly testing capacitance sensing array fault conditions using a floating conductor |
EP2247998B1 (en) * | 2008-02-28 | 2019-04-10 | New York University | Method and apparatus for providing input to a processor, and a sensor pad |
US7948672B2 (en) * | 2008-03-07 | 2011-05-24 | Qualcomm Mems Technologies, Inc. | System and methods for tiling display panels |
US9018030B2 (en) * | 2008-03-20 | 2015-04-28 | Symbol Technologies, Inc. | Transparent force sensor and method of fabrication |
JP2009244346A (ja) * | 2008-03-28 | 2009-10-22 | Toshiba Corp | 背面板、ディスプレイ、表示システム、電力供給方法および表示方法 |
TWI528248B (zh) * | 2008-04-02 | 2016-04-01 | Elan Microelectronics Corp | Capacitive touch device, touch sensing control method and control circuit applied in capacitive touch device |
JP4318056B1 (ja) * | 2008-06-03 | 2009-08-19 | 島根県 | 画像認識装置および操作判定方法 |
KR20100003913A (ko) * | 2008-07-02 | 2010-01-12 | 삼성전자주식회사 | 3차원 영상 디스플레이를 이용한 커뮤니케이션 방법 및장치 |
KR101602363B1 (ko) * | 2008-09-11 | 2016-03-10 | 엘지전자 주식회사 | 3차원 사용자 인터페이스의 제어방법과 이를 이용한 이동 단말기 |
US20110021273A1 (en) * | 2008-09-26 | 2011-01-27 | Caroline Buckley | Interactive music and game device and method |
KR100879328B1 (ko) * | 2008-10-21 | 2009-01-19 | (주)컴버스테크 | 카메라를 이용한 핑거 뎁스 조절 장치 및 방법과 카메라를 이용한 핑거 뎁스 조절 장치를 갖는 터치 스크린 |
US20100097329A1 (en) * | 2008-10-21 | 2010-04-22 | Martin Simmons | Touch Position Finding Method and Apparatus |
KR101564332B1 (ko) * | 2008-10-28 | 2015-10-30 | 삼성전자주식회사 | 액정 표시 장치에 일체화된 터치 스크린 패널과 그 제조 방법 및 터치 센싱 방법 |
US20100117988A1 (en) * | 2008-11-12 | 2010-05-13 | Adrian Marc Simon Jacobs | Optical element and touch sensor |
WO2010096499A2 (en) * | 2009-02-17 | 2010-08-26 | Noah Anglin | Floating plane touch detection system |
KR101097309B1 (ko) * | 2009-05-06 | 2011-12-23 | 삼성모바일디스플레이주식회사 | 터치 동작 인식 방법 및 장치 |
US9041521B2 (en) * | 2009-06-04 | 2015-05-26 | The Royal Institution For The Advancement Of Learning/Mcgill University | Floor-based haptic communication system |
TW201101148A (en) * | 2009-06-22 | 2011-01-01 | Sonix Technology Co Ltd | Touch screen, touch module and control method |
BR112012001334A2 (pt) * | 2009-07-30 | 2016-03-15 | Sharp Kk | dispositivo de exibição portátil, método de controle de dispositivo de exibição portátil, programa e meio de gravação |
US8261211B2 (en) * | 2009-10-01 | 2012-09-04 | Microsoft Corporation | Monitoring pointer trajectory and modifying display interface |
US20110109594A1 (en) * | 2009-11-06 | 2011-05-12 | Beth Marcus | Touch screen overlay for mobile devices to facilitate accuracy and speed of data entry |
US20130165825A1 (en) * | 2010-02-12 | 2013-06-27 | Luis Enrique Sucar-Succar | Portable handle for upper limb rehabilitation |
US8599353B2 (en) * | 2010-05-28 | 2013-12-03 | 3M Innovative Properties Company | Display comprising a plurality of substrates and a plurality of display materials disposed between the plurality of substrates that are connected to a plurality of non-overlapping integral conductive tabs |
US8602893B2 (en) * | 2010-06-02 | 2013-12-10 | Sony Computer Entertainment Inc. | Input for computer device using pattern-based computer vision |
JP2012027541A (ja) * | 2010-07-20 | 2012-02-09 | Sony Corp | 接触圧検知装置および入力装置 |
US8913056B2 (en) * | 2010-08-04 | 2014-12-16 | Apple Inc. | Three dimensional user interface effects on a display by using properties of motion |
CN103154867B (zh) * | 2010-10-12 | 2017-09-22 | 纽约大学 | 用于传感利用瓷片、具有一组板的传感器和多点触摸表面目标识别的装置和方法 |
US9524020B2 (en) * | 2010-10-12 | 2016-12-20 | New York University | Sensor having a mesh layer with protrusions, and method |
US8206047B1 (en) * | 2011-06-24 | 2012-06-26 | TouchFire, Inc. | Keyboard overlay for optimal touch typing on a proximity-based touch screen |
KR20130007738A (ko) * | 2011-07-11 | 2013-01-21 | 삼성전자주식회사 | 키 입력장치 |
US9469080B2 (en) * | 2012-01-06 | 2016-10-18 | Prysm, Inc. | Portable display |
CN104103446B (zh) * | 2013-04-15 | 2016-12-28 | 光宝电子(广州)有限公司 | 发光键盘、发光键盘的照明结构及其按键 |
US9904417B2 (en) * | 2014-04-16 | 2018-02-27 | Microchip Technology Incorporated | Projected capacitive touch detection with touch force detection using self-capacitance and mutual capacitance detection |
GB2542204B (en) * | 2015-09-14 | 2019-10-23 | Pavegen Systems Ltd | Flooring system |
WO2017216366A1 (en) * | 2016-06-16 | 2017-12-21 | Barco N.V. | Front maintenance apparatus for tiled led display |
-
2011
- 2011-10-11 CN CN201180049570.4A patent/CN103154867B/zh active Active
- 2011-10-11 US US13/317,131 patent/US9317154B2/en active Active - Reinstated
- 2011-10-11 EP EP11832868.1A patent/EP2628069B1/en active Active
- 2011-10-11 US US13/317,130 patent/US9360959B2/en not_active Expired - Fee Related
- 2011-10-11 CA CA2814183A patent/CA2814183C/en active Active
- 2011-10-11 WO PCT/US2011/001739 patent/WO2012050606A2/en active Application Filing
- 2011-10-11 US US13/317,138 patent/US9411457B2/en active Active
- 2011-10-11 JP JP2013533841A patent/JP6021812B2/ja active Active
-
2016
- 2016-04-15 US US15/130,224 patent/US12008195B2/en active Active
- 2016-06-01 US US15/170,544 patent/US10345984B2/en active Active
- 2016-07-29 US US15/223,454 patent/US10310695B2/en active Active
-
2019
- 2019-05-31 US US16/428,452 patent/US11301083B2/en active Active
- 2019-06-28 US US16/456,413 patent/US11249589B2/en active Active
-
2022
- 2022-02-09 US US17/668,364 patent/US11809659B2/en active Active
- 2022-04-11 US US17/718,280 patent/US11886660B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6222528B1 (en) * | 1997-03-07 | 2001-04-24 | Cirque Corporation | Method and apparatus for data input |
JP2004318200A (ja) * | 2003-04-10 | 2004-11-11 | Vstone Kk | センサシステム、検知情報収集方法、情報伝送システム及び情報伝送方法 |
JP2010531500A (ja) * | 2007-06-25 | 2010-09-24 | ダヴ | タッチコントロール装置 |
JP2009109307A (ja) * | 2007-10-30 | 2009-05-21 | Nitta Ind Corp | センサシート |
US20100090299A1 (en) * | 2008-10-15 | 2010-04-15 | Industrial Technology Research Institute | Flexible electronics for pressure device and fabrication method thereof |
JP2010211399A (ja) * | 2009-03-09 | 2010-09-24 | Sony Corp | 情報処理装置、閾値設定方法及びそのプログラム |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11809672B2 (en) | 2013-09-27 | 2023-11-07 | Sensel, Inc. | Touch sensor detector system and method |
US11650687B2 (en) | 2013-09-27 | 2023-05-16 | Sensel, Inc. | Tactile touch sensor system and method |
US11520454B2 (en) | 2013-09-27 | 2022-12-06 | Sensel, Inc. | Touch sensor detector system and method |
US11068118B2 (en) | 2013-09-27 | 2021-07-20 | Sensel, Inc. | Touch sensor detector system and method |
US11221706B2 (en) | 2013-09-27 | 2022-01-11 | Sensel, Inc. | Tactile touch sensor system and method |
JP7005142B2 (ja) | 2014-06-25 | 2022-01-21 | センセル インコーポレイテッド | 触覚タッチセンサシステム及び方法 |
CN107077240A (zh) * | 2014-06-25 | 2017-08-18 | 森赛尔股份有限公司 | 触觉触摸传感器系统和方法 |
JP2017525030A (ja) * | 2014-06-25 | 2017-08-31 | センセル インコーポレイテッドSensel,Inc. | 触覚タッチセンサシステム及び方法 |
JP2016102756A (ja) * | 2014-11-28 | 2016-06-02 | 凸版印刷株式会社 | 感圧センサ |
JP2018009820A (ja) * | 2016-07-11 | 2018-01-18 | 東京電力ホールディングス株式会社 | 構造物の歪センサ及び構造物歪検出方法 |
JP7510983B2 (ja) | 2016-09-13 | 2024-07-04 | アップル インコーポレイテッド | 力感知及び触覚フィードバックを伴うキーレスキーボード |
US12079043B2 (en) | 2017-07-26 | 2024-09-03 | Apple Inc. | Computer with keyboard |
JP2019168413A (ja) * | 2018-03-26 | 2019-10-03 | 住友理工株式会社 | トランスデューサシート |
WO2019187653A1 (ja) * | 2018-03-26 | 2019-10-03 | 住友理工株式会社 | トランスデューサシート |
JP2019184300A (ja) * | 2018-04-04 | 2019-10-24 | Nissha株式会社 | タイル状センサ |
Also Published As
Publication number | Publication date |
---|---|
US20120089348A1 (en) | 2012-04-12 |
CA2814183C (en) | 2018-07-10 |
US11301083B2 (en) | 2022-04-12 |
US9411457B2 (en) | 2016-08-09 |
EP2628069A4 (en) | 2017-10-04 |
WO2012050606A2 (en) | 2012-04-19 |
US11886660B2 (en) | 2024-01-30 |
US20120086659A1 (en) | 2012-04-12 |
CN103154867A (zh) | 2013-06-12 |
US20220244830A1 (en) | 2022-08-04 |
US20120087545A1 (en) | 2012-04-12 |
JP6021812B2 (ja) | 2016-11-09 |
US10345984B2 (en) | 2019-07-09 |
US9360959B2 (en) | 2016-06-07 |
US20160283008A1 (en) | 2016-09-29 |
CA2814183A1 (en) | 2012-04-19 |
US20160364047A1 (en) | 2016-12-15 |
WO2012050606A3 (en) | 2012-07-19 |
US20220308729A1 (en) | 2022-09-29 |
US9317154B2 (en) | 2016-04-19 |
EP2628069A2 (en) | 2013-08-21 |
US12008195B2 (en) | 2024-06-11 |
US11809659B2 (en) | 2023-11-07 |
US10310695B2 (en) | 2019-06-04 |
US20190384432A1 (en) | 2019-12-19 |
EP2628069B1 (en) | 2020-12-02 |
CN103154867B (zh) | 2017-09-22 |
US20160364051A1 (en) | 2016-12-15 |
US11249589B2 (en) | 2022-02-15 |
US20190332207A1 (en) | 2019-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11809659B2 (en) | Fusing depth and pressure imaging to provide object identification for multi-touch surfaces | |
US11809653B2 (en) | Sensor having a mesh layer with protrusions, and method | |
US20200192463A1 (en) | Sensors Having a Connecting Frame and Method for Composite Sensors | |
Schmitz et al. | Flexibles: deformation-aware 3D-printed tangibles for capacitive touchscreens | |
Zhang et al. | Electrick: Low-cost touch sensing using electric field tomography | |
US8766925B2 (en) | Method and apparatus for providing input to a processor, and a sensor pad | |
Follmer et al. | deForm: an interactive malleable surface for capturing 2.5 D arbitrary objects, tools and touch | |
CN105992992B (zh) | 低外形指点杆 | |
Grau et al. | Mechanical force redistribution: enabling seamless, large-format, high-accuracy surface interaction | |
Brito et al. | Multimodal augmentation of surfaces using conductive 3D printing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140630 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150529 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150630 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150904 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160209 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160906 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161004 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6021812 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |