JP7134169B2 - 手書き図式のコネクタの管理用システムおよび方法 - Google Patents
手書き図式のコネクタの管理用システムおよび方法 Download PDFInfo
- Publication number
- JP7134169B2 JP7134169B2 JP2019514746A JP2019514746A JP7134169B2 JP 7134169 B2 JP7134169 B2 JP 7134169B2 JP 2019514746 A JP2019514746 A JP 2019514746A JP 2019514746 A JP2019514746 A JP 2019514746A JP 7134169 B2 JP7134169 B2 JP 7134169B2
- Authority
- JP
- Japan
- Prior art keywords
- connector
- graphical elements
- mapped
- geometric
- adjusted
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/206—Drawing of charts or graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/32—Digital ink
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/42—Document-oriented image-based pattern recognition based on the type of document
- G06V30/422—Technical drawings; Geographical maps
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
- Character Discrimination (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
Description
本出願は、2017年3月22日に出願された米国特許出願第15/465,946号の優先権を主張するが、2016年12月15日に出願された欧州特許出願第16290237.3号の優先権を主張し、全体は参照により本明細書に組み込まれる。
Claims (18)
- コンピューティングデバイス上の図式要素の接続を管理するシステムであって、前記コンピューティングデバイスが、プロセッサと、前記プロセッサの制御の下に入力される手描き図式要素を検出して認識するための少なくとも1つの非一時的なコンピューター読み取り可能な記録媒体とを含み、前記少なくとも1つの非一時的なコンピューター読み取り可能な記録媒体が、
前記コンピューティングデバイスに関連付けられた表示装置上にインタラクティブなインクにより複数の入力された図式要素を表示させる手段と、
複数の図式要素を接続するコネクタとして少なくとも1つの図式要素を識別する手段と、
前記接続された図式要素の各々の幾何学的特性において定義された幾何学的構成を決定する手段であって、前記幾何学的構成は、前記接続された図式要素の形状および境界に独立であり、前記接続された図式要素の幾何学的特性に基づき、前記接続された図式要素の各々の前記幾何学的特性は、幾何学的な中心を少なくとも含む、手段と、
マッピングされた点を定義するために前記接続された図式要素に対する前記少なくとも1つの識別されたコネクタの接続点を前記幾何学的構成にマッピングする手段と、
前記幾何学的構成にマッピングされた接続点のうちの2点を結ぶ線分と、前記幾何学的構成にマッピングされたコネクタ上の点との距離の最大値を決定する手段と、
前記少なくとも1つの識別されたコネクタと1つまたは複数の前記接続された図式要素の1つまたは複数の前記幾何学的特性との前記インタラクティブなインクにより受信された1つまたは複数のインタラクションに基づいて前記幾何学的構成上の前記マッピングされた点の位置を調整する手段であって、前記幾何学的構成にマッピングされた前記コネクタ上の点は、前記最大値に基づいて調整される、手段と、
前記接続された図式要素上の前記調整されたマッピングされた点のマッピングに少なくとも従って調整された接続点として前記図式要素の再表示を引き起こす手段と
を備えたことを特徴とするシステム。 - 前記少なくとも1つのコネクタは、前記コネクタの特性および前記図式要素間の位置関係に基づいて識別されることを特徴とする請求項1に記載のシステム。
- 前記少なくとも1つの識別されたコネクタは非線形のコネクタであることを特徴とする請求項1または2に記載のシステム。
- 前記非線形のコネクタは湾曲コネクタであることを特徴とする請求項3に記載のシステム。
- 前記少なくとも1つの非一時的なコンピューター読み取り可能な記録媒体が、前記図式要素を再表示させる場合に前記最大値を維持する手段をさらに備えたことを特徴とする請求項4に記載のシステム。
- 前記インタラクティブなインクはデジタルインクであることを特徴とする請求項1、2、3、4、または5のいずれか一項に記載のシステム。
- プロセッサと、前記プロセッサの制御の下に入力された手描き図式要素を検出して認識するための少なくとも1つの非一時的なコンピューター読み取り可能な記録媒体とを備えた、コンピューティングデバイス上の図式要素の接続を管理する方法であって、
前記コンピューティングデバイスに関連付けられた表示装置上にインタラクティブなインクにより複数の入力された図式要素を表示するステップと、
複数の図式要素を接続するコネクタとして少なくとも1つの図式要素を識別するステップと、
前記接続された図式要素の各々の幾何学的特性において定義された幾何学的構成を決定するステップであって、前記幾何学的構成は、前記接続された図式要素の形状および境界に独立であり、前記接続された図式要素の幾何学的特性に基づき、前記接続された図式要素の各々の前記幾何学的特性は、幾何学的な中心を少なくとも含む、ステップと、
マッピングされた点を定義するために前記接続された図式要素に対する前記少なくとも1つの識別されたコネクタの接続点を前記幾何学的構成にマッピングするステップと、
前記幾何学的構成にマッピングされた接続点のうちの2点を結ぶ線分と、前記幾何学的構成にマッピングされたコネクタ上の点との距離の最大値を決定するステップと、
前記少なくとも1つの識別されたコネクタと1つまたは複数の前記接続された図式要素の1つまたは複数の前記幾何学的特性との前記インタラクティブなインクにより受信された1つまたは複数のインタラクションに基づいて前記幾何学的構成上の前記マッピングされた点の位置を調整するステップであって、前記幾何学的構成にマッピングされた前記コネクタ上の点は、前記最大値に基づいて調整される、ステップと、
前記接続された図式要素上の前記調整されたマッピングされた点のマッピングに少なくとも従って前記調整された接続点として前記図式要素を再表示させるステップと
を備えることを特徴とする方法。 - 前記コネクタの特性および前記図式要素間の位置関係に基づいて前記少なくとも1つのコネクタを識別するステップをさらに備えたことを特徴とする請求項7に記載の方法。
- 前記少なくとも1つの識別されたコネクタは非線形のコネクタであることを特徴とする請求項7または8に記載の方法。
- 前記非線形のコネクタは湾曲コネクタであることを特徴とする請求項9に記載の方法。
- 前記図式要素を再表示させる場合に前記最大値を維持するステップをさらに備えたことを特徴とする請求項10に記載の方法。
- 前記インタラクティブなインクはデジタルインクであることを特徴とする請求項7、8、9、10、または11のいずれか一項に記載の方法。
- コンピューター読み取り可能なプログラムコードを有する非一時的なコンピューター読み取り可能な記録媒体であって、前記コンピューター読み取り可能なプログラムコードは、コンピューティングデバイス上で図式要素の接続を管理する方法を実装するように実行されるよう適用され、前記コンピューティングデバイスは、プロセッサと、前記プロセッサの制御の下に入力された手描き図式要素を検出して認識するための少なくとも1つの非一時的なコンピューター読み取り可能な記録媒体とを備え、前記方法が、
前記コンピューティングデバイスに関連付けられた表示装置上にインタラクティブなインクにより複数の入力された図式要素を表示するステップと、
複数の図式要素を接続するコネクタとして少なくとも1つの図式要素を識別するステップと、
前記接続された図式要素の各々の幾何学的特性において定義された幾何学的構成を決定するステップであって、前記幾何学的構成は、前記接続された図式要素の形状および境界に独立であり、前記接続された図式要素の幾何学的特性に基づき、前記接続された図式要素の各々の前記幾何学的特性は、幾何学的な中心を少なくとも含む、ステップと、
マッピングされた点を定義するために前記接続された図式要素に対する前記少なくとも1つの識別されたコネクタの接続点を前記幾何学的構成にマッピングするステップと、
前記幾何学的構成にマッピングされた接続点のうちの2点を結ぶ線分と、前記幾何学的構成にマッピングされたコネクタ上の点との距離の最大値を決定するステップと、
前記少なくとも1つの識別されたコネクタと1つまたは複数の前記接続された図式要素の1つまたは複数の前記幾何学的特性との前記インタラクティブなインクにより受信された1つまたは複数のインタラクションに基づいて前記幾何学的構成上の前記マッピングされた点の位置を調整するステップであって、前記幾何学的構成にマッピングされた前記コネクタ上の点は、前記最大値に基づいて調整される、ステップと、
前記接続された図式要素上の前記調整されたマッピングされた点のマッピングに少なくとも従って前記調整された接続点として前記図式要素を再表示させるステップと
を備えることを特徴とする非一時的なコンピューター読み取り可能な記録媒体。 - 前記コネクタの特性および前記図式要素間の位置関係に基づいて前記少なくとも1つのコネクタを識別するステップをさらに備えたことを特徴とする請求項13に記載の非一時的なコンピューター読み取り可能な記録媒体。
- 前記少なくとも1つの識別されたコネクタは非線形のコネクタであることを特徴とする請求項13または14に記載の非一時的なコンピューター読み取り可能な記録媒体。
- 前記非線形のコネクタは湾曲コネクタであることを特徴とする請求項15に記載の非一時的なコンピューター読み取り可能な記録媒体。
- 前記方法が前記図式要素を再表示させる場合に前記最大値を維持するステップをさらに備えたことを特徴とする請求項16に記載の非一時的なコンピューター読み取り可能な記録媒体。
- 前記インタラクティブなインクはデジタルインクであることを特徴とする請求項13、14、15、16、または17のいずれか一項に記載の非一時的なコンピューター読み取り可能な記録媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16290237 | 2016-12-15 | ||
EP16290237.3 | 2016-12-15 | ||
US15/465,946 US20180173688A1 (en) | 2016-12-15 | 2017-03-22 | System and method for management of handwritten diagram connectors |
US15/465,946 | 2017-03-22 | ||
PCT/EP2017/082816 WO2018109084A1 (en) | 2016-12-15 | 2017-12-14 | System and method for management of handwritten diagram connectors |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020504848A JP2020504848A (ja) | 2020-02-13 |
JP2020504848A5 JP2020504848A5 (ja) | 2021-01-21 |
JP7134169B2 true JP7134169B2 (ja) | 2022-09-09 |
Family
ID=57799506
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019514746A Active JP7134169B2 (ja) | 2016-12-15 | 2017-12-14 | 手書き図式のコネクタの管理用システムおよび方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20180173688A1 (ja) |
EP (1) | EP3555736B1 (ja) |
JP (1) | JP7134169B2 (ja) |
KR (1) | KR102470522B1 (ja) |
CN (1) | CN109690462B (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10254941B2 (en) | 2017-06-29 | 2019-04-09 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
US10140392B1 (en) * | 2017-06-29 | 2018-11-27 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
US10761719B2 (en) * | 2017-11-09 | 2020-09-01 | Microsoft Technology Licensing, Llc | User interface code generation based on free-hand input |
US10867081B2 (en) | 2018-11-21 | 2020-12-15 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
US10706637B2 (en) | 2018-11-21 | 2020-07-07 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
US10922449B2 (en) | 2018-11-21 | 2021-02-16 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
WO2021178221A1 (en) | 2020-03-03 | 2021-09-10 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
US11514203B2 (en) | 2020-05-18 | 2022-11-29 | Best Apps, Llc | Computer aided systems and methods for creating custom products |
US20230133057A1 (en) * | 2021-10-29 | 2023-05-04 | Keysight Technologies, Inc. | System and method for configuring network elements in a design network topology |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060061776A1 (en) | 2004-09-21 | 2006-03-23 | Microsoft Corporation | System and method for editing a hand-drawn table in ink input |
JP2015521302A (ja) | 2012-03-15 | 2015-07-27 | マイクロソフト コーポレーション | リンクの湾曲のインタラクティブコントロール |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3388524B2 (ja) * | 1994-06-30 | 2003-03-24 | カシオ計算機株式会社 | イメージ入力装置 |
JP4094706B2 (ja) * | 1996-08-15 | 2008-06-04 | ゼロックス コーポレイション | コンピュータ制御デイスプレイシステム |
CA2390506C (en) * | 2002-06-12 | 2013-04-02 | Smart Technologies Inc. | System and method for recognizing connector gestures |
US7218779B2 (en) * | 2003-01-21 | 2007-05-15 | Microsoft Corporation | Ink divider and associated application program interface |
US7352902B2 (en) * | 2003-09-24 | 2008-04-01 | Microsoft Corporation | System and method for detecting a hand-drawn object in ink input |
US7324691B2 (en) * | 2003-09-24 | 2008-01-29 | Microsoft Corporation | System and method for shape recognition of hand-drawn objects |
US7394935B2 (en) * | 2004-09-21 | 2008-07-01 | Microsoft Corporation | System and method for editing a hand-drawn chart in ink input |
US20100013833A1 (en) * | 2008-04-14 | 2010-01-21 | Mallikarjuna Gandikota | System and method for modifying features in a solid model |
DE102015000377A1 (de) * | 2014-02-07 | 2015-08-13 | Adobe Systems, Inc. | Bereitstellen einer Zeichenhilfe unter Nutzung einer Merkmalserfassung und eines semantischen Kennzeichnens |
US10417491B2 (en) * | 2015-10-19 | 2019-09-17 | Myscript | System and method for recognition of handwritten diagram connectors |
-
2017
- 2017-03-22 US US15/465,946 patent/US20180173688A1/en not_active Abandoned
- 2017-12-14 EP EP17816794.6A patent/EP3555736B1/en active Active
- 2017-12-14 KR KR1020197007656A patent/KR102470522B1/ko active IP Right Grant
- 2017-12-14 JP JP2019514746A patent/JP7134169B2/ja active Active
- 2017-12-14 CN CN201780052845.7A patent/CN109690462B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060061776A1 (en) | 2004-09-21 | 2006-03-23 | Microsoft Corporation | System and method for editing a hand-drawn table in ink input |
JP2015521302A (ja) | 2012-03-15 | 2015-07-27 | マイクロソフト コーポレーション | リンクの湾曲のインタラクティブコントロール |
Also Published As
Publication number | Publication date |
---|---|
KR20190113741A (ko) | 2019-10-08 |
JP2020504848A (ja) | 2020-02-13 |
EP3555736B1 (en) | 2024-06-26 |
CN109690462A (zh) | 2019-04-26 |
EP3555736A1 (en) | 2019-10-23 |
KR102470522B1 (ko) | 2022-11-23 |
CN109690462B (zh) | 2024-02-13 |
US20180173688A1 (en) | 2018-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7134169B2 (ja) | 手書き図式のコネクタの管理用システムおよび方法 | |
US11157732B2 (en) | System and method of handwriting recognition in diagrams | |
US11740783B2 (en) | System and method of guiding handwriting diagram input | |
KR102428704B1 (ko) | 핸드라이팅된 다이어그램 커넥터들의 인식을 위한 시스템 및 방법 | |
KR102257172B1 (ko) | 기하학적 형상들을 인식하는 시스템 및 방법 | |
JP7388645B2 (ja) | グラフィックオブジェクトを選択するための方法及び対応するデバイス | |
JP7486131B2 (ja) | フリーハンドライティングモードでの手書きテキスト入力の処理 | |
US10579868B2 (en) | System and method for recognition of objects from ink elements | |
US11429259B2 (en) | System and method for selecting and editing handwriting input elements | |
EP4047465A1 (en) | Modifying digital content | |
WO2018109084A1 (en) | System and method for management of handwritten diagram connectors | |
US20240231582A9 (en) | Modifying digital content including typed and handwritten text |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201202 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201202 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211007 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211012 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220314 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220802 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220830 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7134169 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |