JP2019516170A - インクコマンドによる視覚的ユーザインタフェースコントロールの操作 - Google Patents
インクコマンドによる視覚的ユーザインタフェースコントロールの操作 Download PDFInfo
- Publication number
- JP2019516170A JP2019516170A JP2018550357A JP2018550357A JP2019516170A JP 2019516170 A JP2019516170 A JP 2019516170A JP 2018550357 A JP2018550357 A JP 2018550357A JP 2018550357 A JP2018550357 A JP 2018550357A JP 2019516170 A JP2019516170 A JP 2019516170A
- Authority
- JP
- Japan
- Prior art keywords
- ink
- control
- container
- item
- command
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03543—Mice or pucks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/171—Editing, e.g. inserting or deleting by use of digital ink
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/32—Digital ink
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
- Inking, Control Or Cleaning Of Printing Machines (AREA)
- Digital Computer Display Output (AREA)
- Pens And Brushes (AREA)
- Inks, Pencil-Leads, Or Crayons (AREA)
Abstract
Description
Claims (15)
- プロセッサベースのデバイスであって:
プロセッサと;
前記プロセッサによるオペレーティングシステムの実行に応答して、前記プロセッサに、
マウス及び/又はキーボード入力で操作可能なコントロールを表示させ、
前記表示されたコントロールに近接するインク入力を受け取らせ、
前記受け取ったインク入力をインクコマンドとして解釈させ、
前記解釈されたインクコマンドに従って前記表示されたコントロールを操作させる、
コンテンツを有するメモリと;
を備える、デバイス。 - 前記表示されたコントロールは、インデックス値を設定するための1次元値設定コントロールであり、
前記受け取ったインク入力は、手書きの数字を含み、
前記解釈されたインクコマンドは、前記手書きの数字に基づくインデックス値を指定する、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、量を設定するためのものであり、コントロール、ハンドル及びトラックを有し、該トラックは、第1端部と第2端部を有し、前記ハンドルは、前記量の異なる値に対応する前記トラック上の異なる点に再配置可能であり、
前記受け取ったインク入力は、前記コントロールのトラックを、前記トラックの前記第1端部から前記トラックの前記第2端部までの距離の特定のパーセンテージで横切るインクを含み、
前記解釈されたインクコマンドは、前記パーセンテージに基づく、前記量についての値を指定する、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、視覚的記号を有するボタンであり、
前記受け取ったインク入力は、前記ボタンが有する前記視覚的記号の近似物を含み、
前記解釈されたインクコマンドに従って前記表示されたコントロールを操作することは、前記ボタンをアクティブにすることを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、複数の列挙されたテキスト文字列のうちの1つを設定するための列挙テキスト文字列ピッカーコントロールであり、列挙されたテキスト文字列の各々が文字シーケンスで構成され、
前記受け取ったインク入力は、前記複数の列挙されたテキスト文字列のうちのただ1つの列挙されたテキスト文字列の文字シーケンスの先頭部分に一致している手書きの文字シーケンスであり、
前記解釈されたインクコマンドに従って前記表示されたコントロールを操作することは、そのシーケンスの先頭部分が前記手書きの文字シーケンスに一致している前記列挙されたテキスト文字列を設定することを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、コンテナ内のアイテムを選択するためのコンテナコントロールであり、該コンテナコントロールは、前記コンテナ内のアイテムの少なくとも一部の各々の視覚的表現を含み、
前記受け取ったインク入力は、前記アイテムの視覚的表現のうちの1つ以上を囲んでいる囲み形状であり、
前記解釈されたインク入力に従って前記表示されたコントロールを操作することは、その視覚的表現が前記囲み形状によって囲まれている前記アイテムを選択することを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、ソースコンテナ内のアイテムの少なくとも一部の各々の視覚的表現を含むコンテナコントロールであり、該アイテムの視覚的表現のうちの少なくとも1つは、表現されるアイテムが選択されたことを示し、
前記受け取ったインク入力は、前記表現されるアイテムが選択されたことを示すアイテムの視覚的表現のうちの1つの近くで始まり、宛先コンテナの視覚的指示の近くで終わる矢印であり、
前記解釈されたインク入力に従って前記表示されたコントロールを操作することは、前記選択されたアイテムを前記ソースコンテナから前記宛先コンテナに転送することを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、コンテナ内のアイテムの少なくとも一部の各々の視覚的表現を含むコンテナコントロールであり、
前記受け取ったインク入力は、選択されたアイテムの表現の少なくとも一部の上に描かれた形状を含み、
前記解釈されたインク入力に従って前記表示されたコントロールを操作することは、前記選択されたアイテムを前記コンテナから削除することを含む、
請求項1に記載のデバイス。 - コンピューティングシステムに:
マウス入力で操作可能なコントロールを表示させ;
前記表示されたコントロールに向けられたインクコマンドを受け取らせ;
前記受け取ったインクコマンドに従って前記表示されたコントロールを操作させる;
ように構成されるコンテンツを有する、コンピュータ読取可能媒体。 - コンピューティングシステムにおける方法であって:
ディスプレイ領域に対して特定の位置でインク入力を受け取るステップと;
前記受け取ったインク入力の形状及び位置に基づいて、前記受け取ったインク入力をインクコマンドとして解釈するステップと;
前記解釈されたインクコマンドを実行するステップと;
を備える、方法。 - 前記表示されたコントロールは、1つ以上の電子ドキュメントリーダのページであり、
前記受け取ったインク入力は、選択された方向を指す選択された数の手書きのキャレットを含み、
前記解釈されたインクコマンドに従って前記表示されたコントロールを操作することは、前記選択された方向で前記選択された数のページフリップを実行することを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、日付を設定するための日付ピッカーコントロールであり、該コントロールは、週に各々対応する行に配列された複数の日付を提示し、
前記受け取ったインク入力は、前記コントロールによって提示される選択された日付を包含する囲み形状又は日付を指示するテキストであり、
前記解釈されたインクコマンドに従って前記表示されたコントロールを操作することは、前記選択された日付又は前記指示された日付を設定することを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、コンテナ内のアイテムを選択するためのコンテナコントロールであり、該コンテナコントロールは、前記コンテナ内のアイテムの少なくとも一部の各々の視覚的表現を含み、前記コンテナ内の前記アイテムの各々は、当該アイテムに関連付けられるテキスト文字列を有し、
前記受け取ったインク入力は、文字シーケンスを含む手書きのテキスト文字列であり、
前記解釈されたインク入力に従って前記表示されたコントロールを操作することは、前記コンテナコントロールが視覚的表現を含んでいるアイテムを、関連付けられるテキスト文字列が前記手書きのテキスト文字列と一致するアイテムのみにサブセット化することを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、ソースコンテナ内のアイテムの少なくとも一部の各々の視覚的表現を含むコンテナコントロールであり、アイテムの視覚的表現のうちの少なくとも1つは、表現されるアイテムが選択されたことを示し、
前記受け取ったインク入力は、前記表現されるアイテムが選択されたことを示す前記アイテムの視覚的表現のうちの1つの近くで始まり、アイテムに対して実行可能な操作の視覚的指示の近くで終わる矢印であり、
前記解釈されたインク入力に従って前記表示されたコントロールを操作することは、前記選択されたアイテムを指示された操作の対象にすることを含む、
請求項1に記載のデバイス。 - 前記表示されたコントロールは、コンテナ内のアイテムを選択するためのコンテナコントロールであり、該コンテナコントロールは、前記コンテナ内のアイテムの少なくとも一部の各々の視覚的表現を含み、
前記受け取ったインク入力は、1つ以上の区別されたアイテムの各々の表現の近くに描かれたチェックマーク、星形又はアスタリスクを含み、
前記解釈されたインク入力に従って前記表示されたコントロールを操作することは、前記区別されたアイテムを選択することを含む、
請求項1に記載のデバイス。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/084,272 | 2016-03-29 | ||
US15/084,272 US20170285931A1 (en) | 2016-03-29 | 2016-03-29 | Operating visual user interface controls with ink commands |
PCT/US2017/023697 WO2017184294A1 (en) | 2016-03-29 | 2017-03-23 | Operating visual user interface controls with ink commands |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019516170A true JP2019516170A (ja) | 2019-06-13 |
JP2019516170A5 JP2019516170A5 (ja) | 2020-04-30 |
Family
ID=58530640
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018550357A Pending JP2019516170A (ja) | 2016-03-29 | 2017-03-23 | インクコマンドによる視覚的ユーザインタフェースコントロールの操作 |
Country Status (17)
Country | Link |
---|---|
US (2) | US20170285931A1 (ja) |
EP (1) | EP3436915A1 (ja) |
JP (1) | JP2019516170A (ja) |
KR (1) | KR20180122732A (ja) |
CN (1) | CN108885530A (ja) |
AU (1) | AU2017252170B2 (ja) |
BR (1) | BR112018016175A2 (ja) |
CA (1) | CA3014942A1 (ja) |
CL (1) | CL2018002719A1 (ja) |
CO (1) | CO2018010521A2 (ja) |
IL (1) | IL261497B2 (ja) |
MX (1) | MX2018011574A (ja) |
PH (1) | PH12018550126A1 (ja) |
RU (1) | RU2018134170A (ja) |
SG (1) | SG11201808020SA (ja) |
WO (1) | WO2017184294A1 (ja) |
ZA (1) | ZA201805312B (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11023661B2 (en) | 2018-05-03 | 2021-06-01 | Microsoft Technology Licensing, Llc | Visually enhanced digital ink |
US10719230B2 (en) * | 2018-09-27 | 2020-07-21 | Atlassian Pty Ltd | Recognition and processing of gestures in a graphical user interface using machine learning |
US11455339B1 (en) | 2019-09-06 | 2022-09-27 | Tableau Software, LLC | Incremental updates to natural language expressions in a data visualization user interface |
US11698933B1 (en) | 2020-09-18 | 2023-07-11 | Tableau Software, LLC | Using dynamic entity search during entry of natural language commands for visual data analysis |
US11301631B1 (en) | 2020-10-05 | 2022-04-12 | Tableau Software, LLC | Visually correlating individual terms in natural language input to respective structured phrases representing the natural language input |
Family Cites Families (78)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5347295A (en) * | 1990-10-31 | 1994-09-13 | Go Corporation | Control of a computer through a position-sensed stylus |
US5953735A (en) * | 1991-03-20 | 1999-09-14 | Forcier; Mitchell D. | Script character processing method and system with bit-mapped document editing |
US5583542A (en) * | 1992-05-26 | 1996-12-10 | Apple Computer, Incorporated | Method for deleting objects on a computer display |
JPH09198546A (ja) | 1996-01-22 | 1997-07-31 | Toshiba Corp | 自動取引装置 |
US6956562B1 (en) * | 2000-05-16 | 2005-10-18 | Palmsource, Inc. | Method for controlling a handheld computer by entering commands onto a displayed feature of the handheld computer |
US6897851B2 (en) | 2001-01-05 | 2005-05-24 | International Business Machines Corporation | Methods and apparatus for formatted entry of electronic ink |
US7240300B2 (en) * | 2001-02-15 | 2007-07-03 | Nbor Corporation | Method for creating user-defined computer operations using arrows |
US6883145B2 (en) * | 2001-02-15 | 2005-04-19 | Denny Jaeger | Arrow logic system for creating and operating control systems |
US7120299B2 (en) * | 2001-12-28 | 2006-10-10 | Intel Corporation | Recognizing commands written onto a medium |
US6938222B2 (en) | 2002-02-08 | 2005-08-30 | Microsoft Corporation | Ink gestures |
US7036077B2 (en) * | 2002-03-22 | 2006-04-25 | Xerox Corporation | Method for gestural interpretation in a system for selecting and arranging visible material in document images |
US7086013B2 (en) * | 2002-03-22 | 2006-08-01 | Xerox Corporation | Method and system for overloading loop selection commands in a system for selecting and arranging visible material in document images |
US7299424B2 (en) * | 2002-05-14 | 2007-11-20 | Microsoft Corporation | Lasso select |
US20040121298A1 (en) | 2002-11-06 | 2004-06-24 | Ctb/Mcgraw-Hill | System and method of capturing and processing hand-written responses in the administration of assessments |
US7554530B2 (en) * | 2002-12-23 | 2009-06-30 | Nokia Corporation | Touch screen user interface featuring stroke-based object selection and functional object activation |
CA2513762A1 (en) | 2003-01-23 | 2004-08-05 | Intergraph Hardware Technologies Company | Video analyzer |
US20040196313A1 (en) * | 2003-02-26 | 2004-10-07 | Microsoft Corporation | Ink repurposing |
US7793233B1 (en) * | 2003-03-12 | 2010-09-07 | Microsoft Corporation | System and method for customizing note flags |
US8448083B1 (en) * | 2004-04-16 | 2013-05-21 | Apple Inc. | Gesture control of multimedia editing applications |
US20060001656A1 (en) * | 2004-07-02 | 2006-01-05 | Laviola Joseph J Jr | Electronic ink system |
US7454717B2 (en) * | 2004-10-20 | 2008-11-18 | Microsoft Corporation | Delimiters for selection-action pen gesture phrases |
US8487879B2 (en) | 2004-10-29 | 2013-07-16 | Microsoft Corporation | Systems and methods for interacting with a computer through handwriting to a screen |
US20060136833A1 (en) * | 2004-12-15 | 2006-06-22 | International Business Machines Corporation | Apparatus and method for chaining objects in a pointer drag path |
JP2007145106A (ja) | 2005-11-25 | 2007-06-14 | Xanavi Informatics Corp | 車載情報端末 |
US8074175B2 (en) * | 2006-01-06 | 2011-12-06 | Microsoft Corporation | User interface for an inkable family calendar |
JP4762070B2 (ja) * | 2006-07-19 | 2011-08-31 | 富士通株式会社 | 手書き入力装置、手書き入力方法、及びコンピュータプログラム |
DE202007018940U1 (de) * | 2006-08-15 | 2009-12-10 | N-Trig Ltd. | Bewegungserkennung für einen Digitalisierer |
US20080084400A1 (en) * | 2006-10-10 | 2008-04-10 | Outland Research, Llc | Touch-gesture control of video media play on handheld media players |
US20080104020A1 (en) * | 2006-10-27 | 2008-05-01 | Microsoft Corporation | Handwritten Query Builder |
TW200825881A (en) * | 2006-12-04 | 2008-06-16 | Ulead Systems Inc | Method and apparatus for selecting digital items |
JP2008186120A (ja) | 2007-01-29 | 2008-08-14 | Seiko Epson Corp | ユーザの指示に従って処理を実行するための処理装置、処理方法、および、プログラム |
US7936341B2 (en) * | 2007-05-30 | 2011-05-03 | Microsoft Corporation | Recognizing selection regions from multiple simultaneous inputs |
US8423914B2 (en) * | 2007-06-08 | 2013-04-16 | Apple Inc. | Selection user interface |
US8094939B2 (en) * | 2007-06-26 | 2012-01-10 | Microsoft Corporation | Digital ink-based search |
JP4385169B1 (ja) | 2008-11-25 | 2009-12-16 | 健治 吉田 | 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート |
US20100031202A1 (en) * | 2008-08-04 | 2010-02-04 | Microsoft Corporation | User-defined gesture set for surface computing |
US8954894B2 (en) * | 2008-11-15 | 2015-02-10 | Adobe Systems Incorporated | Gesture-initiated symbol entry |
US20130014041A1 (en) * | 2008-12-09 | 2013-01-10 | Denny Jaeger | Using gesture objects to replace menus for computer control |
US20100185949A1 (en) * | 2008-12-09 | 2010-07-22 | Denny Jaeger | Method for using gesture objects for computer control |
WO2010071630A1 (en) * | 2008-12-15 | 2010-06-24 | Hewlett-Packard Development Company, L.P. | Gesture based edit mode |
US8341558B2 (en) * | 2009-09-16 | 2012-12-25 | Google Inc. | Gesture recognition on computing device correlating input to a template |
TW201129921A (en) * | 2010-02-24 | 2011-09-01 | Mstar Semiconductor Inc | Electronic displaying apparatus with touching capability and operating method thereof |
US8930360B2 (en) * | 2010-05-28 | 2015-01-06 | Yahoo! Inc. | System and method for online handwriting recognition in web queries |
US8635555B2 (en) * | 2010-06-08 | 2014-01-21 | Adobe Systems Incorporated | Jump, checkmark, and strikethrough gestures |
US8799798B2 (en) * | 2010-06-09 | 2014-08-05 | Fujitsu Limited | Method and system for handwriting-based launch of an application |
US20110307840A1 (en) * | 2010-06-10 | 2011-12-15 | Microsoft Corporation | Erase, circle, prioritize and application tray gestures |
US8555195B2 (en) * | 2010-06-29 | 2013-10-08 | Ricoh Co., Ltd. | Bookmark function for navigating electronic document pages |
US20120030566A1 (en) * | 2010-07-28 | 2012-02-02 | Victor B Michael | System with touch-based selection of data items |
US9021402B1 (en) * | 2010-09-24 | 2015-04-28 | Google Inc. | Operation of mobile device interface using gestures |
US8793624B2 (en) * | 2011-05-18 | 2014-07-29 | Google Inc. | Control of a device using gestures |
CN102855079B (zh) * | 2011-05-24 | 2016-06-08 | Lg电子株式会社 | 移动终端 |
US9204094B2 (en) * | 2011-06-28 | 2015-12-01 | Lifesize Communications, Inc. | Adjusting volume of a videoconference using touch-based gestures |
US9571622B2 (en) * | 2011-11-28 | 2017-02-14 | Kika Tech (Hk) Holdings Co. Limited | Method of inputting data entries of a service in one continuous stroke |
US9600169B2 (en) * | 2012-02-27 | 2017-03-21 | Yahoo! Inc. | Customizable gestures for mobile devices |
US9304656B2 (en) * | 2012-03-30 | 2016-04-05 | Google Inc. | Systems and method for object selection on presence sensitive devices |
KR101395480B1 (ko) * | 2012-06-01 | 2014-05-14 | 주식회사 팬택 | 필기 입력에 기초하여 어플리케이션을 실행하는 방법 및 그 단말 |
CN102789362A (zh) * | 2012-06-29 | 2012-11-21 | 鸿富锦精密工业(深圳)有限公司 | 电子设备及其智能计算控制方法 |
KR20140008987A (ko) * | 2012-07-13 | 2014-01-22 | 삼성전자주식회사 | 필기 이미지 인식을 이용한 어플리케이션 제어 방법 및 장치 |
US9619037B2 (en) * | 2012-07-25 | 2017-04-11 | Facebook, Inc. | Custom gestures |
KR101929301B1 (ko) * | 2012-08-20 | 2019-03-12 | 삼성전자 주식회사 | 필기 제스처 인식을 통한 휴대단말의 기능 실행 제어 방법 및 장치 |
US9250783B2 (en) * | 2012-08-21 | 2016-02-02 | Apple Inc. | Toggle gesture during drag gesture |
GB201215283D0 (en) * | 2012-08-28 | 2012-10-10 | Microsoft Corp | Searching at a user device |
US8943092B2 (en) * | 2013-03-04 | 2015-01-27 | Microsoft Corporation | Digital ink based contextual search |
US9189149B2 (en) * | 2013-03-21 | 2015-11-17 | Sharp Laboratories Of America, Inc. | Equivalent gesture and soft button configuration for touch screen enabled device |
JP2014215906A (ja) | 2013-04-26 | 2014-11-17 | 株式会社東芝 | 文字入力装置、方法、及びプログラム |
KR20140132171A (ko) * | 2013-05-07 | 2014-11-17 | 삼성전자주식회사 | 터치용 펜을 이용하는 휴대 단말기 및 이를 이용한 필기 입력 방법 |
US20140337804A1 (en) * | 2013-05-10 | 2014-11-13 | Microsoft Corporation | Symbol-based digital ink analysis |
US9116871B2 (en) | 2013-05-20 | 2015-08-25 | Microsoft Technology Licensing, Llc | Ink to text representation conversion |
KR102162836B1 (ko) * | 2013-08-30 | 2020-10-07 | 삼성전자주식회사 | 필드 속성을 이용한 컨텐트를 제공하는 전자 장치 및 방법 |
CN103442244A (zh) * | 2013-08-30 | 2013-12-11 | 北京京东方光电科技有限公司 | 3d眼镜、3d显示系统及3d显示方法 |
US9383910B2 (en) * | 2013-10-04 | 2016-07-05 | Microsoft Technology Licensing, Llc | Autoscroll regions |
WO2015065620A1 (en) * | 2013-11-01 | 2015-05-07 | Slide Rule Software | Calendar management system |
US11334843B2 (en) * | 2014-02-28 | 2022-05-17 | Freightmonster.com Inc. | Apparatus for temporal scheduling of a load to be transported |
US9459794B1 (en) * | 2014-03-24 | 2016-10-04 | Amazon Technologies, Inc. | Interactions based on multiple stylus inputs |
KR20150126494A (ko) * | 2014-05-02 | 2015-11-12 | 엘지전자 주식회사 | 이동 단말기 및 그 제어 방법 |
KR20160034685A (ko) * | 2014-09-22 | 2016-03-30 | 삼성전자주식회사 | 전자장치에서 객체 입력 방법 및 장치 |
US10037137B2 (en) * | 2014-12-23 | 2018-07-31 | Lenovo (Singapore) Pte. Ltd. | Directing input of handwriting strokes |
US10083163B2 (en) * | 2016-08-10 | 2018-09-25 | Adobe Systems Incorporated | Completing fields in electronic documents by automatically assigning drawing input |
-
2016
- 2016-03-29 US US15/084,272 patent/US20170285931A1/en not_active Abandoned
-
2017
- 2017-03-23 MX MX2018011574A patent/MX2018011574A/es unknown
- 2017-03-23 SG SG11201808020SA patent/SG11201808020SA/en unknown
- 2017-03-23 KR KR1020187031187A patent/KR20180122732A/ko not_active Application Discontinuation
- 2017-03-23 CA CA3014942A patent/CA3014942A1/en active Pending
- 2017-03-23 AU AU2017252170A patent/AU2017252170B2/en active Active
- 2017-03-23 JP JP2018550357A patent/JP2019516170A/ja active Pending
- 2017-03-23 RU RU2018134170A patent/RU2018134170A/ru not_active Application Discontinuation
- 2017-03-23 WO PCT/US2017/023697 patent/WO2017184294A1/en active Application Filing
- 2017-03-23 EP EP17716684.0A patent/EP3436915A1/en not_active Ceased
- 2017-03-23 BR BR112018016175-6A patent/BR112018016175A2/pt unknown
- 2017-03-23 CN CN201780022387.2A patent/CN108885530A/zh not_active Withdrawn
-
2018
- 2018-08-07 PH PH12018550126A patent/PH12018550126A1/en unknown
- 2018-08-10 ZA ZA201805312A patent/ZA201805312B/en unknown
- 2018-08-30 IL IL261497A patent/IL261497B2/en unknown
- 2018-09-25 CL CL2018002719A patent/CL2018002719A1/es unknown
- 2018-09-28 CO CONC2018/0010521A patent/CO2018010521A2/es unknown
-
2019
- 2019-12-20 US US16/724,085 patent/US11144196B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CL2018002719A1 (es) | 2019-01-18 |
MX2018011574A (es) | 2019-01-28 |
BR112018016175A2 (pt) | 2018-12-18 |
US11144196B2 (en) | 2021-10-12 |
EP3436915A1 (en) | 2019-02-06 |
WO2017184294A1 (en) | 2017-10-26 |
RU2018134170A3 (ja) | 2020-06-16 |
CN108885530A (zh) | 2018-11-23 |
PH12018550126A1 (en) | 2019-02-27 |
AU2017252170A1 (en) | 2018-08-23 |
RU2018134170A (ru) | 2020-03-30 |
AU2017252170B2 (en) | 2022-02-17 |
IL261497B2 (en) | 2023-06-01 |
ZA201805312B (en) | 2019-10-30 |
IL261497A (en) | 2018-10-31 |
US20170285931A1 (en) | 2017-10-05 |
US20200125253A1 (en) | 2020-04-23 |
SG11201808020SA (en) | 2018-10-30 |
CA3014942A1 (en) | 2017-10-26 |
CO2018010521A2 (es) | 2018-10-10 |
KR20180122732A (ko) | 2018-11-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7377319B2 (ja) | タッチ感知式セカンダリディスプレイにおいてユーザインタフェースコントロールを動的に提供するシステム、デバイス、及び方法 | |
US11144196B2 (en) | Operating visual user interface controls with ink commands | |
US9886188B2 (en) | Manipulating multiple objects in a graphic user interface | |
US20240089230A1 (en) | Method and system for organizing and interacting with messages on devices | |
US20130111380A1 (en) | Digital whiteboard implementation | |
JP5922598B2 (ja) | マルチタッチ利用、ジェスチャ及び実装 | |
JP5260733B2 (ja) | ソースオブジェクトから少なくとも1つの対象オブジェクトに対するアニメーションエフェクトのコピー | |
US20050015731A1 (en) | Handling data across different portions or regions of a desktop | |
CN107272999A (zh) | 提供上下文菜单的方法、设备和计算机可读存储介质 | |
US11250208B2 (en) | Dynamic whiteboard templates | |
US11036806B2 (en) | Search exploration using drag and drop | |
US11249627B2 (en) | Dynamic whiteboard regions | |
CN108885505B (zh) | 具有交互式内容元素的直观文档导航 | |
JP5864689B2 (ja) | 情報処理装置、情報処理方法および記録媒体 | |
US20120229397A1 (en) | Method and apparatus for selecting desired contents on read text in portable terminal | |
CN107209756B (zh) | 在标记语言文档中支持数字墨水 | |
CN107977155B (zh) | 一种手写识别方法、装置、设备和存储介质 | |
US9753630B1 (en) | Card stack navigation | |
EP2965181B1 (en) | Enhanced canvas environments | |
US9189150B2 (en) | Information processing device, information processing method, and computer-readable medium that determine an area of a display screen to which an input operation belongs | |
JP6398706B2 (ja) | 入力方法、入力装置及びプログラム | |
CN113901776A (zh) | 音频交互方法、介质、装置和计算设备 | |
CN113705178A (zh) | 文档处理方法、装置、电子设备及介质 | |
JP2018092418A (ja) | プログラム及び表示制御装置 | |
CN113377220A (zh) | 信息存储方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200319 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200319 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210216 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210921 |