JP7219076B2 - 筆記入力装置及び筆記入力システム - Google Patents
筆記入力装置及び筆記入力システム Download PDFInfo
- Publication number
- JP7219076B2 JP7219076B2 JP2018229851A JP2018229851A JP7219076B2 JP 7219076 B2 JP7219076 B2 JP 7219076B2 JP 2018229851 A JP2018229851 A JP 2018229851A JP 2018229851 A JP2018229851 A JP 2018229851A JP 7219076 B2 JP7219076 B2 JP 7219076B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- writing
- pseudo
- voice
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
- G06F3/04146—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position using pressure sensitive conductive elements delivering a boolean signal and located between crossing sensing lines, e.g. located between X and Y sensing line layers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明では、公知の構成を備える電子ボードを適用することができる。ここでは、一例として、電子ボード1の概略構成を説明し、詳細な説明は省略する。
タッチペン2は、ユーザが電子ボード1に対してタッチ入力するための電子ペン(スタイラスペンともいう。)である。例えば、ユーザは、タッチペン2により、タッチパネル14の入力面(被接触部)に対してタッチ入力を行う。
図9を参照しつつ、筆記入力システム100によって実行される音声出力処理の一例について説明する。例えば、前記音声出力処理は、タッチペン2の制御部21によって実行される。なお、ここでは、前記筆記モードが黒板筆記モードM1に設定されたものとする。
前述した実施形態(実施形態1)では、音声生成部212がサンプル音声データに対して接触音の特徴に応じた音声加工を行うことにより、疑似音声を生成する実施形態について説明した。これに対して、変形例1では、音声生成部212は、マイク23により検出される前記接触音を音声加工することにより前記疑似音声を生成する。
上述した実施形態では、ユーザが音声スイッチ27をON状態にした場合には、ユーザがタッチペン2によりタッチパネル14の入力面に筆記していない場合であっても前記疑似音声が出力される場合がある。例えば、ユーザがタッチペン2によりタッチパネル14の入力面に筆記していない場合において、タッチペン2のマイク23がファーストタッチ音又は摩擦音に類似した音を検出した場合には、検出した音に応じた前記疑似音声が出力される。この場合の前記疑似音声は、ユーザが意図したものとは言えない。
筆記入力システム100は、前記接触音の種類に応じて異なる方法により前記疑似音声を生成してもよい。具体的には、音声生成部212は、筆圧検出部214(図10参照)により検出される前記筆圧の変化量が閾値(本発明の第2閾値に対応)以上である場合には前記筆圧に基づいて前記ファーストタッチ音の前記疑似音声(第1疑似音声)を生成し、筆圧検出部214により検出される前記筆圧の変化量が前記閾値未満の場合には、マイク23により検出される前記接触音に基づいて前記摩擦音の前記疑似音声(第2疑似音声)を生成する。このように、音声生成部212は、筆圧検出部214により検出される前記筆圧に応じて前記疑似音声を変化させてもよい。
通常、タッチペン2が前記入力面に接触した場合に生じる前記接触音が大きい場合には、前記接触音を直接聞き取ることができる。その上、このような場合に前記疑似音声を出力させた場合、前記接触音と前記疑似音声とが二重に聞き取られることになってしまうため、ユーザが違和感を覚える。このため、前記疑似音声を出力させる必要性が低い。一方、タッチペン2が前記入力面に接触した場合に生じる前記接触音が小さい場合には、前記接触音を直接聞き取り難くなるため、前記疑似音声を出力させる必要性が高い。そこで、変形例4に係る筆記入力システム100では、音声出力部213は、マイク23により検出される前記接触音の音量が閾値以下の場合に前記疑似音声を出力し、マイク23により検出される前記接触音の音量が閾値を超える場合に前記疑似音声を出力しない構成とすることが好ましい。これにより、前記接触音の音量に応じて違和感のない疑似音声を出力することができる。
2 :タッチペン
11 :制御部
12 :記憶部
13 :表示パネル
14 :タッチパネル
20 :ペン先
21 :制御部
22 :記憶部
23 :マイク
24 :スピーカー
26 :モードスイッチ
27 :音声スイッチ
28 :感圧センサ
100 :筆記入力システム
111 :入力検出部
112 :描画処理部
211 :接触音取得部
212 :音声生成部
213 :音声出力部
214 :筆圧検出部
221 :筆記モード情報
222 :音声データ情報
223 :判定用データ
224 :サンプル音声データ
225 :判定用データ
Claims (13)
- タッチパネルに対して筆記入力が可能な筆記入力装置であって、
前記筆記入力装置の先端部が被接触部に接触する際に生じる接触音を検出するマイクと、
前記マイクにより検出される前記接触音に基づいて、疑似音声を生成する音声生成部と、
前記音声生成部により生成される前記疑似音声を出力させる音声出力部と、
を備え、
前記音声出力部は、前記マイクにより検出される前記接触音の音量が閾値以下の場合に前記疑似音声を出力し、前記マイクにより検出される前記接触音の音量が前記閾値を超える場合に前記疑似音声を出力しない、筆記入力装置。 - 前記音声生成部は、前記マイクにより検出される前記接触音を音声加工することにより前記疑似音声を生成する、
請求項1に記載の筆記入力装置。 - サンプル音声データを記憶する記憶部をさらに備え、
前記音声生成部は、前記マイクにより検出される前記接触音と前記サンプル音声データに基づき前記疑似音声を生成する、
請求項1に記載の筆記入力装置。 - 前記音声生成部は、前記サンプル音声データに対して前記接触音の特徴に応じた音声加工を行うことにより、前記疑似音声を生成する、
請求項3に記載の筆記入力装置。 - 前記先端部に加わる筆圧を検出する筆圧検出部をさらに備え、
前記音声生成部は、前記筆圧検出部により検出される前記筆圧に応じて前記疑似音声を変化させる、
請求項1~4の何れか1項に記載の筆記入力装置。 - 前記音声出力部は、前記筆圧検出部により検出される前記筆圧が第1閾値以上である場合に前記疑似音声を出力し、前記筆圧が前記第1閾値未満である場合に前記疑似音声を出力しない、
請求項5に記載の筆記入力装置。 - 前記音声生成部は、前記筆圧検出部により検出される前記筆圧の変化量が第2閾値以上である場合に前記筆圧に基づいて前記疑似音声を生成し、前記筆圧検出部により検出される前記筆圧の変化量が前記第2閾値未満の場合に、前記マイクにより検出される前記接触音に基づいて前記疑似音声を生成する、
請求項5又は6に記載の筆記入力装置。 - 前記音声生成部は、前記筆圧検出部により検出される前記筆圧と前記マイクにより検出される前記接触音とに基づいて前記疑似音声を生成する、
請求項5又は6に記載の筆記入力装置。 - 前記筆記入力装置により前記タッチパネルに対して前記筆記入力を行った場合に、前記タッチパネルから前記筆記入力に応じた検出信号を取得する検出取得部をさらに備え、
前記音声出力部は、前記検出取得部により前記検出信号が取得された場合に前記疑似音声を出力し、前記検出取得部により前記検出信号が取得されない場合に前記疑似音声を出力しない、
請求項1~4の何れか1項に記載の筆記入力装置。 - 音声を出力するスピーカーをさらに備え、
前記音声出力部は、前記音声生成部により生成される前記疑似音声を前記スピーカーから出力させる、
請求項1~9の何れか1項に記載の筆記入力装置。 - タッチパネルと、当該タッチパネルに筆記入力が可能な筆記入力装置と、を含み、
前記筆記入力装置の先端部が被接触部に接触する際に生じる接触音を検出するマイクと、
前記マイクにより検出される前記接触音に基づいて、疑似音声を生成する音声生成部と、
前記音声生成部により生成される前記疑似音声を出力させる音声出力部と、
を備え、
前記音声出力部は、前記マイクにより検出される前記接触音の音量が閾値以下の場合に前記疑似音声を出力し、前記マイクにより検出される前記接触音の音量が前記閾値を超える場合に前記疑似音声を出力しない、筆記入力システム。 - タッチパネルに対して筆記入力が可能な筆記入力装置であって、
前記筆記入力装置の先端部が被接触部に接触する際に生じる接触音を検出するマイクと、
前記マイクにより検出される前記接触音に基づいて、疑似音声を生成する音声生成部と、
前記音声生成部により生成される前記疑似音声を出力させる音声出力部と、
前記先端部に加わる筆圧を検出する筆圧検出部と、
を備え、
前記音声生成部は、前記筆圧検出部により検出される前記筆圧の変化量が閾値以上である場合に前記筆圧に基づいて前記疑似音声を生成し、前記筆圧検出部により検出される前記筆圧の変化量が前記閾値未満の場合に、前記マイクにより検出される前記接触音に基づいて前記疑似音声を生成する、筆記入力装置。 - タッチパネルと、当該タッチパネルに筆記入力が可能な筆記入力装置と、を含み、
前記筆記入力装置の先端部が被接触部に接触する際に生じる接触音を検出するマイクと、
前記マイクにより検出される前記接触音に基づいて、疑似音声を生成する音声生成部と、
前記音声生成部により生成される前記疑似音声を出力させる音声出力部と、
前記先端部に加わる筆圧を検出する筆圧検出部と、
を備え、
前記音声生成部は、前記筆圧検出部により検出される前記筆圧の変化量が閾値以上である場合に前記筆圧に基づいて前記疑似音声を生成し、前記筆圧検出部により検出される前記筆圧の変化量が前記閾値未満の場合に、前記マイクにより検出される前記接触音に基づいて前記疑似音声を生成する、筆記入力システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018229851A JP7219076B2 (ja) | 2018-12-07 | 2018-12-07 | 筆記入力装置及び筆記入力システム |
US16/700,537 US10936094B2 (en) | 2018-12-07 | 2019-12-02 | Writing input device and writing input system |
CN201911243471.4A CN111290730B (zh) | 2018-12-07 | 2019-12-06 | 书写输入装置以及书写输入系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018229851A JP7219076B2 (ja) | 2018-12-07 | 2018-12-07 | 筆記入力装置及び筆記入力システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020091781A JP2020091781A (ja) | 2020-06-11 |
JP7219076B2 true JP7219076B2 (ja) | 2023-02-07 |
Family
ID=70970922
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018229851A Active JP7219076B2 (ja) | 2018-12-07 | 2018-12-07 | 筆記入力装置及び筆記入力システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US10936094B2 (ja) |
JP (1) | JP7219076B2 (ja) |
CN (1) | CN111290730B (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008078523A1 (ja) | 2006-12-25 | 2008-07-03 | Konica Minolta Holdings, Inc. | 手書き電子入力システム |
US20090295758A1 (en) | 2008-05-27 | 2009-12-03 | Industrial Technology Research Institute | Method for writing motion and trajectory recognition and writing apparatus and recognizing system |
US20120127088A1 (en) | 2010-11-19 | 2012-05-24 | Apple Inc. | Haptic input device |
US20160044422A1 (en) | 2014-08-11 | 2016-02-11 | Dell Products, Lp | Pointer System for Context Based Feedback |
US20170285774A1 (en) | 2016-04-01 | 2017-10-05 | Kunjal Parikh | Characterization and simulation of writing instruments |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08190450A (ja) | 1995-01-09 | 1996-07-23 | Matsushita Electric Ind Co Ltd | 手書き入力装置 |
JP2004517398A (ja) * | 2000-12-27 | 2004-06-10 | ガーサビアン、フィルーツ | スタイラス・コンピュータ |
TWI301590B (en) * | 2005-12-30 | 2008-10-01 | Ibm | Handwriting input method, apparatus, system and computer recording medium with a program recorded thereon of capturing video data of real-time handwriting strokes for recognition |
JP5305545B2 (ja) * | 2011-01-06 | 2013-10-02 | パナソニック株式会社 | 手書き文字入力装置および携帯端末 |
JP2014026460A (ja) * | 2012-07-26 | 2014-02-06 | Xacti Corp | ペン型入力装置、電子機器及び電子機器システム |
KR102063766B1 (ko) * | 2013-09-17 | 2020-01-08 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어방법 |
JP6531776B2 (ja) * | 2017-04-25 | 2019-06-19 | トヨタ自動車株式会社 | 音声対話システムおよび音声対話方法 |
CN108227966B (zh) * | 2017-12-29 | 2020-04-14 | 福建云脉教育科技股份有限公司 | 一种存储记录方法和系统 |
-
2018
- 2018-12-07 JP JP2018229851A patent/JP7219076B2/ja active Active
-
2019
- 2019-12-02 US US16/700,537 patent/US10936094B2/en active Active
- 2019-12-06 CN CN201911243471.4A patent/CN111290730B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008078523A1 (ja) | 2006-12-25 | 2008-07-03 | Konica Minolta Holdings, Inc. | 手書き電子入力システム |
US20090295758A1 (en) | 2008-05-27 | 2009-12-03 | Industrial Technology Research Institute | Method for writing motion and trajectory recognition and writing apparatus and recognizing system |
US20120127088A1 (en) | 2010-11-19 | 2012-05-24 | Apple Inc. | Haptic input device |
US20160044422A1 (en) | 2014-08-11 | 2016-02-11 | Dell Products, Lp | Pointer System for Context Based Feedback |
US20170285774A1 (en) | 2016-04-01 | 2017-10-05 | Kunjal Parikh | Characterization and simulation of writing instruments |
Also Published As
Publication number | Publication date |
---|---|
US20200183507A1 (en) | 2020-06-11 |
JP2020091781A (ja) | 2020-06-11 |
US10936094B2 (en) | 2021-03-02 |
CN111290730A (zh) | 2020-06-16 |
CN111290730B (zh) | 2023-10-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8595012B2 (en) | Systems and methods for input device audio feedback | |
JP5093117B2 (ja) | 手書き電子入力システム | |
KR101421638B1 (ko) | 터치 검출 방법 및 이를 이용하는 터치 제어 장치 | |
KR101997034B1 (ko) | 인터페이스 방법 및 장치 | |
JP2007317159A (ja) | 電子装置の入力装置およびその入力方法 | |
KR20140107287A (ko) | 사용자 제어 제스처 검출 기법 | |
EP3443448B1 (en) | Selective attenuation of sound for display devices | |
JP7299693B2 (ja) | 筆記入力装置及び筆記入力システム | |
WO2015033609A1 (ja) | 情報処理装置、入力方法およびプログラム | |
JP2015153325A (ja) | 情報処理装置、操作支援方法及び操作支援プログラム | |
JP2023184069A (ja) | 情報処理システム、情報処理装置、及び制御方法 | |
JP7219076B2 (ja) | 筆記入力装置及び筆記入力システム | |
TW201344508A (zh) | 觸控偵測方法與觸控偵測裝置 | |
KR20200137403A (ko) | 음성 인식 기능을 구비한 전자칠판 및 전자칠판시스템 | |
JP6942289B2 (ja) | 情報処理装置、サウンドマスキングシステム、制御方法、及び制御プログラム | |
KR20140134188A (ko) | 코드 이미지가 인쇄된 인쇄물을 이용하는 전자펜의 악기 연주 음향재생 제어방법 및 이를 수행하는 전자펜 | |
US9973852B1 (en) | Device having updated acoustic response based on hinge angle | |
JP2004102632A (ja) | 音声認識装置および画像処理装置 | |
EP2657827A2 (en) | Touch detection method and touch control device using the same | |
Schmalfuß et al. | Efficient Snare Drum Model for Acoustic Interfaces with Piezoelectric Sensors | |
JP7457863B1 (ja) | 情報処理システム | |
WO2014103355A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JPH08190450A (ja) | 手書き入力装置 | |
JP2015189161A (ja) | 筆記板及びその音声再生方法 | |
JP2022189711A5 (ja) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210922 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220802 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220921 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230126 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7219076 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |