JP2024044604A - 情報処理システム、情報処理装置、プログラム、および、制御方法 - Google Patents

情報処理システム、情報処理装置、プログラム、および、制御方法 Download PDF

Info

Publication number
JP2024044604A
JP2024044604A JP2022150232A JP2022150232A JP2024044604A JP 2024044604 A JP2024044604 A JP 2024044604A JP 2022150232 A JP2022150232 A JP 2022150232A JP 2022150232 A JP2022150232 A JP 2022150232A JP 2024044604 A JP2024044604 A JP 2024044604A
Authority
JP
Japan
Prior art keywords
information processing
vibration
mode
audio
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022150232A
Other languages
English (en)
Other versions
JP7348368B1 (ja
Inventor
充弘 山▲ざき▼
圭一 吉冨
義従 鈴木
一則 山村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Priority to JP2022150232A priority Critical patent/JP7348368B1/ja
Priority to US18/448,170 priority patent/US20240094820A1/en
Application granted granted Critical
Priority to CN202311213482.4A priority patent/CN117742509A/zh
Publication of JP7348368B1 publication Critical patent/JP7348368B1/ja
Publication of JP2024044604A publication Critical patent/JP2024044604A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R17/00Piezoelectric transducers; Electrostrictive transducers

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】振動部から音声を提示して、利便性を向上する。【解決手段】入力デバイスは、振動部を備え、情報処理装置は、タッチセンサおよび表示部、を備え、タッチセンサと表示部が重畳し、情報処理装置または入力デバイスのコントローラは、タッチセンサへの入力デバイスの入力動作を監視し、音声出力要求を検出するとき、音声モードを有効にし、入力動作を検出するとき記振動モードを有効にし、音声モードは、振動部に音声を提示させる駆動モードであり、振動モードは、タッチセンサへの入力デバイスの接触に応じて振動部を振動させる駆動モードである。【選択図】図2

Description

本発明は、情報処理システム、情報処理装置、プログラム、および、制御方法、例えば、触覚提示機能を備える入力デバイスの制御に関する。
デジタルペンは、電子ペン、スマートペン、スタイラス、などとも呼ばれる入力デバイスである。デジタルペンは、情報処理装置への手書きの文字や図形などの表示および記録に用いられることがある。例えば、デジタルペン対応のタブレット端末またはパーソナルコンピュータ(PC:Personal Computer)は、メモ記録にしばしば用いられることがある。そこで、使用感向上のため、触覚フィードバック機能(haptics feedback)を有するデジタルペンが提案されている。触覚フィードバック機能を有するデジタルペンは、ハプティックペンとも呼ばれる。
例えば、特許文献1には、第1の端部を有するスタイラス本体を含み、第1の端部は、ユーザによって使用されるときに、第1の機能および第2の機能を提供するために構成される対話型スタイラスについて記載されている。対話型スタイラスは、第1の端部と対話型ディスプレイ装置の電極マトリックスとを容量結合させるように、第1の端部を駆動させるように構成されたコントローラをさらに含む。容量結合は、第1の機能に関連し、第2の機能は、明示的なユーザ入力無しに、第1の機能を使用するユーザの意図を自動的に感知することに応じて、無効にされる。対話型スタイラスは、スタイラス本体に含まれ、かつ、第2の機能に関連する触覚アクチュエータをさらに有し、第2の機能を無効にすることは、触覚アクチュエータの動作を阻止することを含む。
特表2017-537395号公報
他方、情報処理装置は、ネットワークを経由してウェブサーバから各種の情報を取得するために用いられることがある。ウェブサーバから提供される情報は、音声を伴う動画像としての形式を有するケースが増えている。会議、講演、事業所など、静寂な環境で情報処理装置を用いるユーザは、なるべく放音せずに提供される情報を確認したいと考えることがある。ヘッドホン、イヤホンなどの音声デバイスを用いて、周囲への放音を避けることも考えられる。
しかしながら、ユーザは音声デバイスを必ずしも所持しているとは限らない。音声デバイスを所持していても、必要となる時点で情報処理装置本体と接続していないこともある。そのため、ユーザにとり利便性の向上につながらないことがあった。
本発明は上記の課題を解決するためになされたものであり、本発明の一態様に係る情報処理システムは、情報処理装置と入力デバイスを備え、前記入力デバイスは、振動部を備え、前記情報処理装置は、タッチセンサおよび表示部、を備え、前記タッチセンサと前記表示部が重畳した情報処理システムであって、前記情報処理装置または前記入力デバイスのコントローラは、前記タッチセンサへの前記入力デバイスの入力動作を監視し、音声出力要求を検出するとき、音声モードを有効にし、前記入力動作を検出するとき、振動モードを有効にし、前記音声モードは、前記振動部に音声を提示させる駆動モードであり、前記振動モードは、前記タッチセンサへの前記入力デバイスの接触に応じて前記振動部を振動させる駆動モードである。
上記の情報処理システムにおいて、前記コントローラは、前記入力デバイスに対する音声設定を前記音声出力要求として検出してもよい。
上記の情報処理システムにおいて、一定時間以上継続して前記入力動作が検出されず、かつ、前記振動部に音声信号が供給されないとき、前記音声モードを無効にしてもよい。
上記の情報処理システムにおいて、前記コントローラは、前記入力動作を検出せず、音声出力要求を検出するとき、前記音声モードを有効にし、前記入力動作を検出するとき、前記音声モードを無効にしてもよい。
上記の情報処理システムにおいて、前記入力デバイスは、接触を検出する接触検出部を備え、前記コントローラは、前記接触が検出されるとき、前記音声モードの有効性を切り替えてもよい。
本発明の第2態様に係る情報処理装置は、コントローラ、タッチセンサおよび表示部、を備え、前記タッチセンサと前記表示部が重畳した情報処理装置であって、前記コントローラは、前記タッチセンサへの入力デバイスの入力動作を監視し、音声出力要求を検出するとき、音声モードを有効にし、前記入力動作を検出するとき、振動モードを有効にし、前記音声モードは、前記入力デバイスの振動部に音声を提示させる駆動モードであり、前記振動モードは、前記タッチセンサへの前記入力デバイスの接触に応じて前記振動部を振動させる駆動モードである。
本発明の第3態様に係るプログラムは、コンピュータに上記の情報処理装置として機能させるためのプログラムである。
本発明の第4態様に係る制御方法は、情報処理装置と入力デバイスを備え、前記入力デバイスは、振動部を備え、前記情報処理装置は、タッチセンサおよび表示部、を備え、前記タッチセンサと前記表示部が重畳した情報処理システムにおける制御方法であって、前記情報処理装置または前記入力デバイスのコントローラは、前記タッチセンサへの前記入力デバイスの入力動作を監視するステップと、音声出力要求を検出するとき、音声モードを有効にし、前記入力動作を検出するとき、振動モードを有効にするステップと、を実行し、前記音声モードは、前記振動部に音声を提示させる駆動モードであり、前記振動モードは、前記タッチセンサへの前記入力デバイスの接触に応じて前記振動部を振動させる駆動モードである制御方法である。
本発明の実施形態によれば、振動部から音声が提示されるので、利便性を向上することができる。
本実施形態に係る情報処理システムの外観構成例を示す斜視図である。 本実施形態に係る情報処理システムの概略構成例を示すブロック図である。 本実施形態に係る情報処理システムのハードウェア構成例を示すブロック図である。 本実施形態に係る情報処理システムの機能構成の一例を示すブロック図である。 本実施形態に係る駆動モードの制御方法の一例を示すフローチャートである。 本実施形態に係る駆動モードの制御方法の他の例を示すフローチャートである。 本実施形態に係る情報処理システムの機能構成の他の例を示すブロック図である。
以下、本発明の実施形態について、図面を参照して説明する。まず、本実施形態に係る情報処理システムS1の外観構成例について説明する。以下の説明では、情報処理装置1がタブレット端末であり、入力デバイス30が触覚提示機能を有するデジタルペンである場合を主とする。デジタルペンは、ペン形状の操作媒体である。本願では、デジタルペンを、単に「ペン」と呼ぶことがある。図1は、本実施形態に係る情報処理システムS1の外観構成例を示す斜視図である。情報処理システムS1は、情報処理装置1と、入力デバイス30とを備える。
情報処理装置1は、幅および高さよりも厚みが薄い平板状の形状を有する。情報処理装置1は、筐体CS1を有し、筐体CS1の一方の主面(以下の説明では、「表面」と呼ぶことがある)にタッチスクリーン20を有する。タッチスクリーン20は、筐体CS1の表面を覆う。タッチスクリーン20の外周は、筐体CS1に囲まれるように支持される。筐体CS1には、情報処理装置1のその他の部材が収容される。
入力デバイス30は、ユーザに把持され、タッチスクリーン20の表面に接近または接触しながら移動されることで、文字、記号、図形などのデータ入力または編集に用いられる。タッチスクリーン20は、表示部21と、タッチセンサ22(後述)を備える。表示部21は、その表面に設置される表示画面DFに各種情報を視認可能に表示する。タッチセンサ22は、表示部21の表面に重ねて配置される。タッチセンサ22は、その表面への入力デバイス30の入力動作を検出する。情報処理装置1は、入力動作の有無を監視し、入力動作を検出するとき、入力動作に基づくデータ入力または編集を実行する。情報処理装置1は、例えば、タッチセンサ22に接触した接触位置の軌跡を表示画面DFに表示させる。
入力デバイス30は、振動部55(後述)を備える。情報処理装置1は、振動部55の駆動モードを制御する。駆動モードには、少なくとも音声モードと振動モードがある。音声モードは、振動部55に音声を再生させる駆動モードである。振動モードは、タッチセンサ22への入力デバイス30の接触に応じて振動部55を振動させる駆動モードである。情報処理装置1は、音声出力要求を検出するとき、音声モードを有効にし、入力動作を検出するとき振動モードを有効にする。ここで、「有効にする」とは、実行可能または使用可能にすること、つまり、イネーブル(enable)を指す。逆に、「無効にする」とは、実行不能または使用不能な状態にすること、つまり、ディスエーブル(disable)を指す。
情報処理装置1は、音声出力要求として、例えば、入力デバイス30に対する音声再生設定または音声再生指示を検出する。音声モードが有効なとき、情報処理装置1は、音声信号を含む駆動信号を振動部55に出力する。振動部55は、入力される駆動信号に従って音声を提示する。振動モードが有効なとき、情報処理装置1は、振動信号を含む駆動信号を振動部55に出力する。振動部55は、入力される駆動信号に従って振動する。この振動が触覚刺激としてユーザに提示される。
次に、本実施形態に係る情報処理システムS1の概略構成例について説明する。図2は、本実施形態に係る情報処理システムS1の概略構成例を示すブロック図である。情報処理システムS1は、情報処理装置1と、入力デバイス30とを備える。
情報処理装置1は、制御部10と、タッチセンサ22と、無線通信部29とを備える。タッチセンサ22は、入力デバイス30の入力動作として、表示画面DFへの接触または一定距離内への接近(ホバリング)を検出するとともに、その位置を特定する。タッチセンサ22は、検出した接触または接近、および、その位置を示す検出情報を含む入力データを生成し、生成した入力データを制御部10に出力する。タッチセンサ22は、入力デバイス30と接触した位置である接触位置における圧力を接触圧力として検出し、検出した接触圧力の情報を入力データに含めて制御部10に出力してもよい。タッチセンサ22は、入力デバイス30の長手方向の表示画面DFに対してなす角度をペン角度として検出してもよい。タッチセンサ22は、検出したペン角度の情報を入力データに含めて制御部10に出力してもよい。表示画面DFへの接近の検出、ペン角度の検出については、後述する。
制御部10は、情報処理装置1の機能全体を制御する。制御部10は、表示処理部102と、音声設定部103と、音声処理部104と、振動制御部110とを備える。
音声設定部103は、例えば、表示部21の表示画面DF(図1)として音声設定画面(図示せず)を表示させる。音声設定画面は、音声を提示させるための提示用デバイスと音量を設定するための画面である。音声設定画面は、自部に接続され、音声を提示可能とする提示可能デバイスを表し、提示可能デバイスごとに音量調整量を指示するための画面部品が配置される。音量調整量は、音声信号に対する利得に相当する。
音声設定部103は、例えば、タッチセンサ22からの入力データに基づいて提示可能デバイスのいずれかを提示用デバイスとして選択し、提示用デバイスに対する音量調整量を設定する。音声設定部103は、選択した提示用デバイスと音量調整量を示す音声設定情報を音声処理部104と振動制御部110に出力する。提示可能デバイスとして、スピーカ26(後述)と入力デバイス30が含まれる。以下の説明では、入力デバイス30が提示用デバイスとして選択される場合を主とする。
音声設定部103の機能は、例えば、オペレーティングシステム(OS:Operating System)のデバイス設定API(Application Programming Interface)関数を実行して実現されうる。音声設定部103の機能は、アプリケーションプログラム(application program、本願では、「アプリ」と呼ぶことがある)に従って当該API関数を呼び出して実現されてもよい。また、本願では、プログラムの実行とは、プログラムに記述された各種の指令で指示される処理を実行するとの意味を含む。
音声処理部104は、音声の提示が指示されるとき、音声信号を取得する。音声の提示は、例えば、タッチセンサ22からの音声再生ボタンの押下を示す入力データにより指示されうる。音声処理部104は、次のいずれかの手法を用いて音声信号を取得してもよい:情報処理装置1の外部からの音声信号の入力、予め記憶された音声信号の読み取り、音声信号の合成、等。音声処理部104は、音声設定部103に係るアプリの機能の一部として実現されてもよい。当該アプリは、例えば、音声通話アプリ、録音再生アプリ、音声合成アプリ、音声配信アプリなどのいずれであってもよい。
音声処理部104には、音声設定部103から音声設定情報が入力される。音声処理部104は、音声設定情報で指示される音量調整量で取得した音声信号の音量を調整する。音声処理部104は、音量調整後の音声信号を、音声設定情報で指示される提示用デバイスに出力する。提示用デバイスとして入力デバイス30が指示される場合には、音声処理部104は、音量調整後の音声信号を振動制御部110に出力する。
表示処理部102は、タッチセンサ22からの入力データで指示される入力動作に従ってデータ入力または編集を行う。表示処理部102は、例えば、一定時間ごとに入力される入力データで指示される接触位置を特定し、接触位置の時系列を形成する。表示処理部102は、形成した接触位置の時系列に基づいて移動軌跡を生成し表示部21に表示させる。
振動制御部110は、タッチセンサ22からの入力動作を示す入力データの入力の有無と音声設定部103からの音声設定情報の入力の有無を監視する。振動制御部110は、入力データと音声設定情報に基づいて入力デバイス30の振動部55の駆動モードを制御する。
振動制御部110は、入力デバイス30のタッチセンサ22への接近または接触に係る入力データが入力されるとき、入力動作を検出したと判定することができる。振動制御部110は、入力動作を検出するとき、振動部55の駆動モードを振動モードと定める。
振動制御部110は、提示用デバイスとしての入力デバイス30または入力デバイス30への音量を示す音声設定情報が入力されるとき、振動部55の駆動モードとして音声出力要求がなされたと判定することができる。音声設定情報の入力により、音声再生に対する意図が示されるためである。
振動制御部110は、入力動作が検出されず、かつ、音声出力要求を検出するとき、振動部55の駆動モードを音声モードに定める。但し、入力動作がその時点まで一定時間(例えば、30秒~3分)以上検出されず、かつ、振動部55に音声信号を出力しない場合には、振動制御部110は、駆動モードを音声モードから振動モードに変更してもよい。
振動制御部110は、入力動作を検出するとき、振動部55を振動させるための振動信号を取得する。振動制御部110は、予め設定された基準波形を示す振動信号を読み出してもよいし、外部機器から振動信号を入力してもよい。振動制御部110は、入力データに示される接触位置の移動速度が高いほど、大きくなるように振動信号の振幅を調整してもよい。また、振動制御部110は、入力デバイス30のタッチセンサ22への接触圧力が高いほど、大きくなるように振動信号の振幅を調整してもよい。
振動制御部110は、定めた駆動モードに応じて、振動部55を駆動させるための駆動信号を定める。駆動モードが音声モードであるとき、振動制御部110は、音声処理部104から入力される音声信号を駆動信号として選択する。駆動モードが振動モードであるとき、振動制御部110は、自部で生成する振動信号を駆動信号として選択する。
振動制御部110は、選択した駆動信号を入力デバイス30に無線通信部29を経由して送信する。送信した駆動信号は、振動部55に供給される。
無線通信部29は、所定の通信方式を用いて、入力デバイス30と無線で各種のデータを送受信する。
次に、入力デバイス30の概略構成例について説明する。入力デバイス30は、無線通信部31と、デバイス制御部50と、振動部55とを備える。
無線通信部31は、所定の通信方式を用いて、情報処理装置1と無線で各種のデータを送受信する。
デバイス制御部50は、入力デバイス30の機能を統括的に制御する。デバイス制御部50は、例えば、情報処理装置1から無線通信部31を用いて駆動信号を受信する。デバイス制御部50は、受信した駆動信号を振動部55に出力する。
振動部55は、デバイス制御部50から入力される駆動信号に従って振動する。振動部55の振動は音波を発生させ、音として提示する。
一般に、人間の可聴帯域は20Hz-20kHz程度であり、500Hz-2kHz帯域に対する感度が他の周波数帯域に対する感度より高い。より低い周波数帯域では、周波数が低くなるほど感度が低下する。これに対し、人間の触覚は、10-100Hz帯域に対する感度が他の周波数帯域に対する感度より高い。より高い周波数帯域では、周波数が高くなるほど感度が低下する。500Hz以上の周波数では、ほとんど振動が知覚されない。駆動信号をなす振動信号は、約200Hz以下の低域成分が主となる。音声信号は、約200Hz以上の高域成分が主となる。
次に、本実施形態に係る情報処理システムS1のハードウェア構成例について説明する。図3は、本実施形態に係る情報処理システムS1のハードウェア構成例を示すブロック図である。情報処理システムS1は、情報処理装置1と、入力デバイス30とを備える。情報処理装置1は、プロセッサ11と、メインメモリ12と、フラッシュメモリ13と、タッチスクリーン20と、オーディオシステム24と、マイクロホン25と、スピーカ26と、ベースバンドチップ27と、第2通信部28と、無線通信部29とを備える。
プロセッサ11は、情報処理装置1全体の機能を制御する。プロセッサ11として、例えば、1個以上のCPU(Central Processing Unit)が適用される。プロセッサ11は、所定のプログラムを実行し、メインメモリ12と、その他のハードウェアと協働し、制御部10としての機能を奏する。
メインメモリ12は、プロセッサ11の作業領域、即ち、実行プログラム、各種設定データの読み込み領域、プログラムの実行により取得した処理データの書き込み領域として利用される書き込み可能メモリである。メインメモリ12は、例えば、複数個のDRAM(Dynamic Random Access Memory)チップを含んで構成される。実行プログラムには、OS、周辺機器等を制御するための各種デバイスドライバ、各種サービス/ユーティリティ、アプリ、などが含まれる。
フラッシュメモリ13には、予めOS、各種デバイスドライバ、各種サービス/ユーティリティ、アプリ、および、各種データを記憶させておく。
表示部21は、プロセッサ11から出力される表示データに基づく各種の表示画面を表示する。表示部21は、例えば、液晶ディスプレイ、有機エレクトロルミネッセンスディスプレイなどのいずれであってもよい。
タッチセンサ22は、接触検出部221と、デバイス検出部222とを備える。
接触検出部221は、表示画面DFに接触した物体(本願では、主に入力デバイス30)と、その接触位置を検出する。接触検出部221は、表示画面DFに接触した物体の接触圧力を検出する。接触検出部221は、例えば、静電容量圧力センサである。接触検出部221は、接触した物体の傾き、即ち、ペン角度を検出してもよい。接触検出部221が3軸の圧力センサである場合には、個々の軸方向の圧力に対する方向余弦を用いてペン角度を特定することができる。
デバイス検出部222は、接触には至っていないが、自部に接近した入力デバイス30とその位置を接近位置として検出する。デバイス検出部222は、例えば、電磁誘導センサを備える。電磁誘導センサは、接近により、共振回路LC1(後述)に生じる交流の誘導磁場を検出する。電磁誘導センサは、その共振周波数における検出した磁場の大きさが一定値を超える位置が存在するか否かにより、入力デバイス30の接近の有無を検出することができる。電子誘導センサは、検出した磁場の大きさが一定値を超える位置を入力デバイス30の接近位置として特定することができる。
オーディオシステム24は、音声信号に対する処理、入力、出力、記録、再生、符号化、および、復号などの処理を行う。オーディオシステム24は、例えば、オーディオIC(Integrated Circuit)を備える。オーディオシステム24には、マイクロホン25とスピーカ26が接続されている。オーディオシステム24には、プロセッサ11、マイクロホン25またはベースバンドチップ27から音声信号が入力されうる。オーディオシステム24は、自部に記録した音声信号を読み出す。オーディオシステム24は、取得した音声信号をスピーカ26またはプロセッサ11に出力することができる。プロセッサ11に出力された音声信号は、ベースバンドチップ27を経由して第2通信部28に、または、無線通信部29を経由して入力デバイス30に出力されうる。入力デバイス30には、その音声信号で伝達される音声成分と上記の振動信号で伝達される振動成分とを合成した駆動信号が入力されることがある。
マイクロホン25は、自部に到来する音を収音し、収音された音の音声信号をオーディオシステム24に出力する。
スピーカ26は、オーディオシステム24から入力される音声信号に基づいて音を提示する。
ベースバンドチップ27は、第2通信部28を用いた通信を制御するための専用ICである。ベースバンドチップ27は、例えば、4G(第4世代無線通信システム)、5G(第5世代無線通信システム)などの公衆無線通信システム、IEEE802.11に規定された構内無線通信ネットワークなどを用いた通信を実現する。ベースバンドチップ27は、プロセッサ11からの制御に従い、第2通信部28を用いて通信ネットワークを経由した他の機器と各種のデータを送受信可能に接続し、各種のデータを送受信する。
第2通信部28は、無線通信ネットワークと接続するための無線通信モジュールである。第2通信部28は、電波を送受信するアンテナを備える。
無線通信部29は、入力デバイス30と無線データを送受信するための無線通信モジュールである。無線通信部29は、通信方式として、例えば、IEEE802.15.1に規定された無線PAN(Personal Area Network)方式を用いることができる。
入力デバイス30は、径よりも長さの方が大きい細長の形状を有する操作媒体である。入力デバイス30は、無線通信部31と、MCU32と、接触検出部36と、振動部55と、共振回路LC1とを備える。
無線通信部31は、情報処理装置1の無線通信部29と無線データを送受信するための無線通信モジュールである。
MCU(Micro Controller Unit)32は、入力デバイス30の機能を統括的に制御する。MCU32は、プロセッサと、ROMやRAMなどのメモリと、各種の入出力インタフェースを備える。MCU32は、情報処理装置1とは独立に稼働する。MCU32は、所定のプログラムを実行して、上記のデバイス制御部50としての機能を奏する。
MCU32は、情報処理装置1から無線通信部31を経由して入力される駆動信号を振動部55に出力する。
振動部55は、DAC33と、アンプ34と、振動発生器35とを備える。
DAC(Digital-to-Analog Converter)33は、MCU32から入力されるディジタルの駆動信号をアナログの駆動信号に変換する。DAC33は、変換されたアナログの駆動信号をアンプ34に出力する。
アンプ(amplifier)34は、DAC33から入力される駆動信号の振幅を調整し、振幅を調整した駆動信号を振動発生器35に出力する。
振動発生器35は、アンプ34から入力される駆動信号に従って振動を発生するアクチュエータである。振動発生器35は、例えば、ピエゾ素子などの圧電振動子を備える。
接触検出部36は、自部への接触を検出する圧力センサを備える。接触検出部36は、振動発生器35から一定距離以上離れた位置に設置される。接触検出部36が検出できる圧力の周波数帯域は、振動信号の周波数帯域と異なっていてもよい。接触検出部36は、検出した圧力が一定値以上か否かにより、接触の有無を判定してもよい。接触検出部36は、検出した接触の検出を示す接触検出信号をMCU32と無線通信部31を経由して情報処理装置1に出力する。
共振回路LC1は、一定の共振周波数で共振する電流を生ずる電気回路である。共振回路LC1は、例えば、コイルとキャパシタを直列に接続して構成される。共振回路LC1は、自身が発生した交流電流により、その共振周波数で極性が変動する磁場を発生させる。発生した磁場によりタッチセンサ22のデバイス検出部222により入力デバイス30の接近が検出される。
次に、本実施形態に係る情報処理システムS1の機能構成例について説明する。
図4は、本実施形態に係る情報処理システムS1の機能構成例を示すブロック図である。図4の例では、図2、図3との差異点を主として説明する。図2、図3との共通点につては、共通の符号を付し、特に断らない限り、上記の説明を援用する。
情報処理システムS1は、情報処理装置1と、入力デバイス30とを備える。
情報処理装置1は、制御部10と、タッチスクリーン20と、無線通信部29と、記憶部40とを備える。記憶部40は、各種のデータを記憶する。記憶部40は、例えば、メインメモリ12とフラッシュメモリ13により実現される。
制御部10は、入力処理部101と、表示処理部102と、音声設定部103と、音声処理部104と、振動制御部110とを備える。
入力デバイス30は、無線通信部31と、接触検出部36と、デバイス制御部50と、振動部55と、を備える。
入力処理部101は、タッチセンサ22からの入力を制御する。入力処理部101の機能は、例えば、プロセッサ11によるタッチセンサ22のデバイスドライバの実行により提供される。入力処理部101は、タッチセンサ22から入力される入力データをOSの指令に従って振動制御部110に出力する。
振動制御部110は、上記のように入力デバイス30の駆動モードを制御する。
振動制御部110は、入力デバイス30の接触検出部36から接触検出信号が入力される都度、音声モードの有効性を逐次に切り替えてもよい。例えば、接触検出信号が入力されるとき、振動制御部110は、その時点における駆動モードが振動モードである場合には、振動モードから音声モードに変更し、その時点における駆動モードが音声モードである場合には、音声モードから振動モードに変更する。これにより、ユーザは、入力デバイス30を他の物体に接触させることにより音声を提示させるか否かを切り替えることができる。
ユーザは、他の物体として、筐体、棚体など平板で空間を取り囲む構成を有する物体に入力デバイス30を押し当て、その物体に入力デバイス30に生ずる音声を共鳴させることができる。共鳴した音声は、十分な音量で放音する。
また、ユーザは、他の物体としてユーザ自身の頭部に押し当て、入力デバイス30に生ずる音声を頭部の内部に伝搬させることができる(骨伝導)。伝搬した音はユーザの内耳に到達することで、骨導音として聴取される。
振動制御部110は、予め記憶部40に記憶された振動信号を読み出し、接触圧力または接触位置の移動速度に応じて振幅を調整してもよい。また、振動制御部110は、図4に例示されるように方位角推定部111と振動信号生成部112を備えてもよい。
方位角推定部111は、タッチセンサ22からの入力データに基づいて表示画面DF上の入力デバイス30の接触位置の移動方向と入力デバイス30の長手方向とのなす角度を方位角として推定する。方位角推定部111は、例えば、直前の時刻における接触位置から、その時点の接触位置への変位の方向を入力デバイス30の移動方向として定めることができる。方位角推定部111は、入力データに示されるペン角度を、その時点における入力デバイス30の長手方向の向きとして定めることができる。方位角推定部111は、定めた方位角を振動信号生成部112に通知する。
振動信号生成部112は、方位角推定部111から通知された方位角に応じた振動波形を示す振動信号を生成する。記憶部40には、予め基準波形情報と合成テーブルを記憶させておく。基準波形情報は、予め定めた複数の基準方位角のそれぞれに対する基準波形を示す情報である。基準方位角は、0°から180°の間に3個以上設定されていればよい。合成テーブルは、基準方位角ごとの基準波形に対する方位角に対する合成比を示すデータテーブルである。
振動信号生成部112は、合成テーブルを参照して、通知された方位角に対する合成比を基準方位角ごとに定める。振動信号生成部112は、定めた合成比を重み係数とする、基準方位角間での振動波形の加重和を振動信号として生成することができる。
次に、本実施形態に係る駆動モードの制御方法について説明する。図5は、本実施形態に係る駆動モードの制御方法の一例を示すフローチャートである。但し、情報処理装置1の起動直後の初期状態では、入力デバイス30の駆動モードを振動モードとし、振動信号に従って振動部55を振動させる。
(ステップS102)振動制御部110は、入力デバイス30の駆動モードを振動モードと定める。入力デバイス30の振動部55には、振動信号が供給され、振動提示を実行する。
(ステップS104)振動制御部110は、タッチセンサ22からの入力データを監視し、音声出力要求を待ち受ける。音声出力要求が検出されるとき(ステップS104 YES)、ステップS106の処理に進む。音声出力要求が検出されないとき(ステップS104 NO)、ステップS102の処理に戻る。
(ステップS106)振動制御部110は、タッチセンサ22からの入力データで伝達される入力動作を待ち受ける。入力動作が検出されるとき(ステップS106 YES)、ステップS102に戻る。入力動作が検出されないとき(ステップS106 NO)、ステップS108の処理に進む。
(ステップS108)振動制御部110は、音声モード停止条件を満足するか否かを判定する。振動制御部110は、例えば、その時点までの一定時間継続して音声処理部104から音声信号が入力されない、または、入力動作が検出されない場合には、音声モード停止条件を満たすと判定する。それ以外の場合には、振動制御部110は、音声モード停止条件を満たさないと判定することができる。音声モード停止条件が満足されない場合(ステップS108 NO)、ステップS110の処理に進む。音声モード停止条件が満足される場合(ステップS108 YES)、ステップS102の処理に戻る。
(ステップS110)振動制御部110は、入力デバイス30の駆動モードを音声モードと定める。入力デバイス30の振動部55には、音声信号が供給され、音声を提示する。その後、ステップS106の処理に戻る。
上記の例は、音声モードの有効性の判定に関し、入力デバイス30の駆動モードが音声モードと振動モードのいずれか一方に排他的に定める場合を主としたが、音声モードは、駆動モードと重複して適用されてもよい。その場合、振動制御部110は、入力デバイス30の駆動モードとしての振動モードを常に有効と設定し、振動モードから音声モードへの変更に代え、音声モードの適用(有効化)を判定し、音声モードから振動モードへの変更に代え、音声モードの停止(無効化)を判定してもよい。
即ち、振動制御部110は、図6に例示されるように、音声出力要求が検出されないとき(ステップS104 NO)、入力動作が検出されるとき(ステップS106 YES)、または、音声モード停止条件が満足される場合(ステップS108 YES)には、ステップS104の処理に戻る。
音声モードと振動モードをいずれも適用する場合には、振動制御部110は、取得した振動信号と音声信号とを合成して得られた信号を駆動信号として生成し、生成した駆動信号を入力デバイス30に出力する。
なお、上記の例は、図4に示されるように、情報処理装置1が振動信号生成部112を備え、振動信号に基づく駆動信号を入力デバイス30に出力する場合を主としたが、これには限られない。情報処理装置1の振動制御部110と入力デバイス30のデバイス制御部50が、情報処理システムS1全体としての振動制御部の処理を分担してもよい。即ち、デバイス制御部50は、上記の振動制御部110の処理の全部または一部を実行し、振動制御部110は、その全部または一部の処理を実行しなくてもよい。但し、デバイス制御部50には、その全部または一部の処理に用いるパラメータ、その他のデータを予め設定しておき、情報処理装置1からの提供を受ける。
図7に例示されるように、入力デバイス30のデバイス制御部50は、振動制御部510を備えてもよい。情報処理装置1の振動制御部110は、方位角推定部111の機能を有し、その他の機能が省略されてもよい。制御部10は、タッチスクリーン20から入力される入力データと、方位角を示すデバイス制御情報を入力デバイス30に出力する。振動制御部110は、タッチセンサ22から入力データから接触位置と接触圧力の一方または両方の情報を特定し、特定した情報をデバイス制御情報に含めて出力してもよい。音声処理部104は、音声信号の出力先を入力デバイス30とする。
振動制御部510は、上記の振動制御部110と同様の処理を実行する。例えば、振動制御部510は、情報処理装置1から入力される入力データに基づいて入力デバイス30の駆動モードを制御する。振動制御部510は、駆動モードの判定に用いる情報として、入力データから入力操作、音声出力要求などの有無を検出する。
振動制御部510は、接触検出部36から接触検出信号の入力の都度、音声モードの有効性を逐次に切り替えてもよいし、入力された接触検出信号を情報処理装置1に出力しなくてもよい。
振動制御部510は、判定した駆動モードに応じて生成した振動信号と音声信号の一方を、または両方から合成された信号を駆動信号として振動部55に出力する。
図7の例では、振動制御部510では、方位角推定処理が省略される。振動制御部510は、予め自部に設定された基準波形情報と合成テーブルを参照し、情報処理装置1から入力されるデバイス制御情報で通知される方位角に基づいて振動信号を生成してもよい。また、振動制御部510は、デバイス制御情報から特定される接触位置と接触圧力の一方または両方の情報に基づいて、生成した振動信号の振幅を調整してもよい。
情報処理装置1の制御部10では、方位角推定部111が省略されてもよい。その場合には、振動制御部510に基準波形情報と合成テーブルが設定され、情報処理装置1から入力される入力データに基づいて方位角推定処理を行う。振動制御部510は、得られた方位角を振動信号の生成に用いる。
なお、上記の例では、情報処理装置1が取得される音声信号に基づく音声を提示する場合を主としたが、これには限られない。デバイス制御部50は、情報処理装置1からの供給を受けずに、音声信号を取得してもよい。デバイス制御部50には、例えば、設定された警告音の音声信号を予め設定しておき、情報処理装置1の制御部10から音声提示指令が入力されるとき、設定した音声信号を読み出す。音声提示指令は、例えば、情報処理装置1のハードウェア、動作環境、その他の異常発生時に発行されうる。デバイス制御部50は、音声提示指令を音声出力要求として判定することができる。デバイス制御部50は、音声モードを有効化するとき、読み出した音声信号を駆動信号として、または、振動信号と合成して得られた信号を駆動信号として振動部55に出力する。
また、上記の例では、情報処理装置1がタブレット端末装置である場合を主としたが、これには限られない。情報処理装置1は、多機能携帯電話機(いわゆる、スマートフォンを含む)、パーソナルコンピュータ、など、タッチスクリーンを用いて情報入力その他の形態の情報通信機器であってもよい。
以上に説明したように、本実施形態に係る情報処理システムS1は、情報処理装置1と入力デバイス30を備える。入力デバイス30は、振動部55を備える。情報処理装置1は、タッチセンサ22および表示部21、を備え、タッチセンサ22と表示部21が重畳している。情報処理装置1または入力デバイス30のコントローラ(例えば、情報処理装置1のプロセッサ11、入力デバイス30のMCU32)は、タッチセンサへの入力デバイス30の入力動作を監視し、振動部55の駆動モードを制御する。駆動モードとして音声モードと振動モードを有し、音声モードは、振動部55に音声を提示させる駆動モードであり、振動モードは、タッチセンサ22への入力デバイス30の接触に応じて振動部55を振動させる駆動モードである。コントローラは、音声出力要求を検出するとき、音声モードを有効にし、入力動作を検出するとき、振動モードを有効にする。
この構成により、入力デバイス30への接触に応じて入力デバイス30を振動させる振動部55に音声の提示が要求される場合に音声信号が供給される。振動部55は、供給される音声信号に基づく音声を提示することができる。そのため、入力デバイス30の使用時における音声の受聴の利便性を向上することができる。
コントローラは、入力デバイス30に対する音声設定を音声出力要求として検出してもよい。
この構成により、特段の操作を行わずに、ユーザの意図に応じて入力デバイス30からの音声を提示させることができる。
コントローラは、一定時間以上継続して入力動作が検出されず、かつ振動部55に音声信号が供給されないとき、音声モードを無効にしてもよい。
この構成により、入力動作も音声信号の供給もない場合には、音声モードが無効にされる。振動モードを優先して適用することができるので、以降の入力動作に対する応答性を確保することができる。
コントローラは、入力動作を検出せず、音声出力要求を検出するとき、音声モードを有効にし、入力動作を検出するとき、音声モードを無効にしてもよい。
この構成により、音声出力要求による音声の提示と、入力動作による振動の提示が排他的に切り替えることができる。音声と振動が同時に提示されないため、両者の混合による音声に対する雑音、接触に伴わない振動に対する違和感を回避することができる。
入力デバイス30は、接触を検出する接触検出部36を備え、コントローラは、接触が検出されるとき、音声モードの有効性を切り替えてもよい。
この構成により、入力デバイス30に対する接触により、音声の提示の有無が切り替わる。そのため、ユーザは、入力デバイス30の他の物体または自身に接触させることにより、音声の提示の要否を簡便に操作することができる。
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。上述の実施形態において説明した各構成は、任意に組み合わせることができる。
S1…情報処理システム、1…情報処理装置、10…制御部、11…プロセッサ、12…メインメモリ、13…フラッシュメモリ、20…タッチスクリーン、21…表示部、22…タッチセンサ、24…オーディオシステム、25…マイクロホン、26…スピーカ、27…ベースバンドチップ、28…第2通信部、29…無線通信部、30…入力デバイス、31…無線通信部、32…MCU、33…DAC、34…アンプ、35…振動発生器、36…接触検出部、40…記憶部、50…デバイス制御部、55…振動部、101…入力処理部、102…表示処理部、103…音声設定部、104…音声処理部、110…振動制御部、111…方位角推定部、112…振動信号生成部、221…接触検出部、222…デバイス検出部

Claims (8)

  1. 情報処理装置と入力デバイスを備え、
    前記入力デバイスは、振動部を備え、
    前記情報処理装置は、タッチセンサおよび表示部、を備え、
    前記タッチセンサと前記表示部が重畳した情報処理システムであって、
    前記情報処理装置または前記入力デバイスのコントローラは、
    前記タッチセンサへの前記入力デバイスの入力動作を監視し、
    音声出力要求を検出するとき、音声モードを有効にし、
    前記入力動作を検出するとき、振動モードを有効にし、
    前記音声モードは、前記振動部に音声を提示させる駆動モードであり、
    前記振動モードは、前記タッチセンサへの前記入力デバイスの接触に応じて前記振動部を振動させる駆動モードである
    情報処理システム。
  2. 前記コントローラは、
    前記入力デバイスに対する音声設定を前記音声出力要求として検出する
    請求項1に記載の情報処理システム。
  3. 前記コントローラは、
    一定時間以上継続して前記入力動作が検出されず、かつ、前記振動部に音声信号が供給されないとき、
    前記音声モードを無効にする
    請求項1に記載の情報処理システム。
  4. 前記コントローラは、
    前記入力動作を検出せず、音声出力要求を検出するとき、前記音声モードを有効にし、
    前記入力動作を検出するとき、前記音声モードを無効にする
    請求項1に記載の情報処理システム。
  5. 前記入力デバイスは、接触を検出する接触検出部を備え、
    前記コントローラは、
    前記接触が検出されるとき、前記音声モードの有効性を切り替える
    請求項1に記載の情報処理システム。
  6. コントローラ、タッチセンサおよび表示部、を備え、
    前記タッチセンサと前記表示部が重畳した情報処理装置であって、
    前記コントローラは、
    前記タッチセンサへの入力デバイスの入力動作を監視し、
    音声出力要求を検出するとき、音声モードを有効にし、
    前記入力動作を検出するとき、振動モードを有効にし、
    前記音声モードは、前記入力デバイスの振動部に音声を提示させる駆動モードであり、
    前記振動モードは、前記タッチセンサへの前記入力デバイスの接触に応じて前記振動部を振動させる駆動モードである
    情報処理装置。
  7. コンピュータに
    請求項6に記載の情報処理装置として機能させるためのプログラム。
  8. 情報処理装置と入力デバイスを備え、
    前記入力デバイスは、振動部を備え、
    前記情報処理装置は、タッチセンサおよび表示部、を備え、
    前記タッチセンサと前記表示部が重畳した情報処理システムにおける制御方法であって、
    前記情報処理装置または前記入力デバイスのコントローラは、
    前記タッチセンサへの前記入力デバイスの入力動作を監視するステップと、
    音声出力要求を検出するとき、音声モードを有効にし、
    前記入力動作を検出するとき、振動モードを有効にするステップと、を実行し
    前記音声モードは、前記振動部に音声を提示させる駆動モードであり、
    前記振動モードは、前記タッチセンサへの前記入力デバイスの接触に応じて前記振動部を振動させる駆動モードである
    制御方法。
JP2022150232A 2022-09-21 2022-09-21 情報処理システム、情報処理装置、プログラム、および、制御方法 Active JP7348368B1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022150232A JP7348368B1 (ja) 2022-09-21 2022-09-21 情報処理システム、情報処理装置、プログラム、および、制御方法
US18/448,170 US20240094820A1 (en) 2022-09-21 2023-08-11 Information processing system, information processing apparatus, recording medium, and control method
CN202311213482.4A CN117742509A (zh) 2022-09-21 2023-09-20 信息处理系统、信息处理装置、程序以及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022150232A JP7348368B1 (ja) 2022-09-21 2022-09-21 情報処理システム、情報処理装置、プログラム、および、制御方法

Publications (2)

Publication Number Publication Date
JP7348368B1 JP7348368B1 (ja) 2023-09-20
JP2024044604A true JP2024044604A (ja) 2024-04-02

Family

ID=88021683

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022150232A Active JP7348368B1 (ja) 2022-09-21 2022-09-21 情報処理システム、情報処理装置、プログラム、および、制御方法

Country Status (3)

Country Link
US (1) US20240094820A1 (ja)
JP (1) JP7348368B1 (ja)
CN (1) CN117742509A (ja)

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6731270B2 (en) * 1998-10-21 2004-05-04 Luidia Inc. Piezoelectric transducer for data entry device
JP2000231627A (ja) * 1998-12-22 2000-08-22 Xerox Corp フィードバック機構を備えた複数モード走査ペン及びこれを用いた入力方法
JP2003288158A (ja) * 2002-01-28 2003-10-10 Sony Corp タクタイル・フィードバック機能を持つ携帯型機器
JP2009516261A (ja) * 2005-11-11 2009-04-16 アノト アクティエボラーク 電子ペン装置における情報管理
US8248218B2 (en) * 2006-12-25 2012-08-21 Konica Minolta Holdings, Inc. Handwriting electronic input system
KR100938260B1 (ko) * 2007-09-20 2010-01-22 한국전자통신연구원 터치 스크린을 이용한 체감 전달 장치 및 시스템
JP5219667B2 (ja) * 2008-07-25 2013-06-26 三菱電機株式会社 フィルター清掃装置、空気調和機
US9468846B2 (en) * 2009-01-30 2016-10-18 Performance Designed Products Llc Tactile feedback apparatus and method
JP5732861B2 (ja) * 2011-01-14 2015-06-10 富士ゼロックス株式会社 画像処理装置及び画像処理プログラム
CN102830816B (zh) 2012-07-24 2016-01-06 瑞声声学科技(常州)有限公司 伸缩触控笔及触控系统
CN105027025A (zh) * 2013-01-27 2015-11-04 微软科技许可有限公司 对唤醒信号改善响应时间的数字化系统
KR102104910B1 (ko) 2013-02-28 2020-04-27 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
US9891722B2 (en) * 2013-03-11 2018-02-13 Barnes & Noble College Booksellers, Llc Stylus-based notification system
JP2014222488A (ja) * 2013-05-14 2014-11-27 株式会社東芝 描画装置及び描画システム
JP2014222492A (ja) * 2013-05-14 2014-11-27 株式会社東芝 描画装置及び描画システム
KR102106779B1 (ko) * 2013-06-28 2020-05-06 삼성전자주식회사 펜 입력 처리 방법 및 상기 방법이 적용되는 장치
US20150054783A1 (en) 2013-08-22 2015-02-26 Microchip Technology Incorporated Touch Screen Stylus with Communication Interface
US10853605B2 (en) * 2014-07-31 2020-12-01 The Code Corporation Barcode reader and docking station for facilitating presentation mode
US9830002B2 (en) * 2014-07-31 2017-11-28 The Code Corporation Barcode reader and docking station for charging the barcode reader
US20160044422A1 (en) * 2014-08-11 2016-02-11 Dell Products, Lp Pointer System for Context Based Feedback
US9383839B1 (en) * 2014-12-08 2016-07-05 Amazon Technologies, Inc. Configuration of a profile associated with a stylus
US10042439B2 (en) * 2014-12-11 2018-08-07 Microsft Technology Licensing, LLC Interactive stylus and display device
US9575575B2 (en) * 2015-01-23 2017-02-21 Lenovo (Singapore) Pte. Ltd. Signal-generating stylus, system, and method
US9658704B2 (en) * 2015-06-10 2017-05-23 Apple Inc. Devices and methods for manipulating user interfaces with a stylus
US20170285774A1 (en) * 2016-04-01 2017-10-05 Kunjal Parikh Characterization and simulation of writing instruments
US10725544B1 (en) * 2016-09-09 2020-07-28 Apple Inc. Pencil haptics
US10268273B1 (en) * 2016-09-09 2019-04-23 Apple Inc. Stylus with multiple inputs
US10281994B2 (en) * 2017-06-16 2019-05-07 Anousheh Sayah Smart wand device
KR102476127B1 (ko) * 2018-08-08 2022-12-12 삼성전자주식회사 전자 장치와 연결된 스타일러스 펜과 연관된 정보를 출력하기 위한 장치 및 그에 관한 방법

Also Published As

Publication number Publication date
US20240094820A1 (en) 2024-03-21
JP7348368B1 (ja) 2023-09-20
CN117742509A (zh) 2024-03-22

Similar Documents

Publication Publication Date Title
US11150733B2 (en) Methods and apparatuses for providing a haptic output signal to a haptic actuator
US10225653B2 (en) Systems and methods for using a piezoelectric speaker as a microphone in a mobile device
US8174495B2 (en) Electronic apparatus
US9215532B2 (en) Systems and methods for using a speaker as a microphone in a mobile device
US10149052B2 (en) Electronic device and vibration information generation device
WO2010065207A1 (en) Audio amplifier apparatus driving a panel to produce both audio signal and haptic feedback
US10238964B2 (en) Information processing apparatus, information processing system, and information processing method
KR20080058121A (ko) 휴대단말기에서의 촉각형 사용자 인터페이스 제공 장치 및방법
WO2013164980A1 (ja) 電子機器、制御方法、及び制御プログラム
CN109144460B (zh) 发声控制方法、装置、电子装置以及存储介质
JP2007115157A (ja) キー操作感覚付与方法及び携帯情報装置
US11032643B2 (en) Distributed mode loudspeaker actuator including patterned electrodes
CN205282093U (zh) 音频播放设备
JP7348368B1 (ja) 情報処理システム、情報処理装置、プログラム、および、制御方法
JP7508517B2 (ja) 情報処理システム、情報処理装置、プログラム、および、制御方法
US20220382340A1 (en) Information handling system including dynamic configuration of piezoelectric transducers for multi-functionality
JP7474363B1 (ja) 情報処理システム
US20220312109A1 (en) Electronic device
JP6067999B2 (ja) 電子機器、制御方法、及び制御プログラム
JP7434633B1 (ja) 情報処理装置、情報処理システム、入力デバイスおよび制御方法
JP6242040B2 (ja) 電子機器、制御方法、及び制御プログラム
WO2024014089A1 (ja) 情報処理装置、情報処理プログラム及び情報処理システム
JP6017829B2 (ja) 電子機器

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220921

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20221216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230907

R150 Certificate of patent or registration of utility model

Ref document number: 7348368

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113